CiudadLab
Voltar ao blog
  • bastidores
  • produto
  • inteligência artificial

A IA inventou cinco conceitos: como montamos um repertório verificado

Bastidor da curadoria do Repertório da Kelly Academy: usar IA para pesquisar deixou tudo mais rápido, mas nenhum item chega ao estudante sem passar por uma checagem contra a fonte original.

4 min de leituraBastidor do case Kelly Academy

O Repertório é a seção da Kelly Academy com pensadores, leis, dados e obras que o estudante pode usar na redação do ENEM. Cada item vem com a ideia explicada, como usar e um exemplo de aplicação.

Para ampliar essa base, passei a usar uma IA de pesquisa, em rodadas. A pesquisa ficou muito mais rápida. E numa dessas rodadas, cinco "conceitos" muito bem escritos simplesmente não existiam.

A resposta curta

  • A base em curadoria saiu de 63 para 113 repertórios, com pesquisa feita por IA em lotes.
  • Nenhum item entra direto: cada um é conferido contra a organização de temas do projeto e contra a fonte original.
  • A checagem encontrou conceitos inventados, um link quebrado, uma fonte descrita de forma errada, uma estatística que não batia com outra fonte e itens repetidos.
  • A regra que ficou: a IA sugere, a fonte confirma.

Por que repertório precisa ser verificado

Na redação do ENEM, repertório ajuda quando é legítimo e bem usado. Uma lei com número errado ou um pensador que nunca disse aquilo prejudica o estudante justamente onde ele queria ganhar ponto.

Numa plataforma de treino o risco é maior, porque um erro na base não aparece uma vez só. Ele se repete em toda redação que usar aquele item.

Como a pesquisa foi pedida

Pedir "me dê bons repertórios" gera texto bonito e pouco confiável. A pesquisa foi montada como um briefing, com regras claras:

O que o briefing exigiaPor que ajuda
O mesmo formato de dados da base atualFacilita comparar e importar sem retrabalho
Fonte primária para cada itemLei no texto oficial, dado no órgão que publicou
Nenhuma citação inventadaMelhor resumir a ideia do que criar uma frase
Status de verificação em cada itemSepara o que foi confirmado do que ainda é dúvida
Lista do que já existe na baseEvita repetir o que o estudante já tem
Prioridade para as lacunasLeis e problemas sociais que ainda não tinham nenhum item

O que a checagem encontrou

Cada lote voltava num arquivo de dados e passava por duas conferências. A primeira era automática: um script comparava os itens novos com os 13 eixos temáticos e os 52 problemas sociais do projeto, e com os códigos já usados. A segunda era manual, abrindo as fontes uma por uma.

  1. Cinco conceitos inventados. Nomes com cara de teoria acadêmica, bem explicados, mas sem nenhum autor ou obra real por trás. É o erro mais perigoso, porque parece confiável.
  2. Um link de fonte que não abria mais.
  3. Uma fonte descrita de forma diferente do que ela realmente é.
  4. Uma estatística sem confirmação, que ainda conflitava com o número publicado por um veículo de notícia.
  5. Evidências repetidas, cadastradas como se fossem itens diferentes.
  6. Notas de prioridade parecidas demais em todos os itens, sinal de campo preenchido no automático.

Como a gente corrigiu

Nada foi corrigido no olho. Para cada problema voltava um pedido de correção específico, com o item, o erro encontrado e o que era esperado. O que não se sustentou saiu da base.

Leis brasileiras passaram a ser conferidas direto no texto oficial publicado pelo Planalto, que foi a fonte mais confiável de todo o processo. Quando uma página de governo não abria, o dado só ficava se aparecesse também numa segunda fonte confiável. E as notas de prioridade ficaram vazias de propósito, até existir um critério de verdade para preencher.

O que muda para o estudante

O estudante vê só o resultado: cada repertório com a ideia central, como usar, um exemplo de aplicação e a fonte para conferir. Todo esse trabalho existe para que ele possa confiar no que leva para a prova.

Checklist para usar IA em pesquisa de conteúdo

  • Peça fonte primária para tudo, não um resumo de outro site.
  • Peça o formato exato que você vai usar depois.
  • Diga o que você já tem, para não receber repetido.
  • Exija que o que não foi confirmado venha marcado como dúvida.
  • Confira a fonte, não o texto que a IA escreveu sobre ela.
  • Desconfie do que parece bom demais. O conceito inventado é sempre o mais redondo.

Resumindo

A IA multiplicou a velocidade da pesquisa, e continua no processo. Mas responsabilidade não se terceiriza: o que chega ao estudante precisa ter uma fonte que alguém abriu e leu. O próximo passo é consolidar os 113 itens e levar a nova versão para o banco da plataforma.