Quem usa um chatbot para aprender um assunto costuma encerrar a conversa com a sensação de ter entendido. Um estudo chileno divulgado nesta sexta-feira (16/10/2026) pelo CENIA, o Centro Nacional de Inteligência Artificial do Chile, mostra que essa sensação pode ser enganosa: universitários que conversaram com o ChatGPT explicaram um tema por escrito pior do que colegas que apenas leram exatamente os mesmos textos — e ainda por cima saíram da tarefa mais confiantes na própria compreensão.

A pesquisa foi liderada por Ivan Aslanov, pesquisador pós-doutorando do CENIA e da Universidade do Chile, junto com Ernesto Guerra, do Instituto de Estudios Avanzados en Educación e pesquisador do Centro de Investigación Avanzada en Educación (CIAE), e Patricio Felmer, investigador do CIAE e Prêmio Nacional de Ciências Exactas 2011. O alvo é um fenômeno clássico da psicologia cognitiva: a "ilusão de profundidade explicativa", a tendência de superestimar o quanto entendemos de algo — que só desmonta quando precisamos explicar por escrito, com nossas palavras, por que as plantas são verdes ou como funciona um zíper. A novidade foi testar se a conversa com um chatbot de inteligência artificial intensifica essa ilusão.

Como o experimento funcionou

O grupo recrutou 102 estudantes universitários chilenos e os dividiu em três. Todos receberam as mesmas quatro perguntas sobre fenômenos do cotidiano: por que existem anos bissextos, como o vidro é fabricado, como funcionam os zíperes e por que a Lua tem fases. Um grupo fez as perguntas a uma versão personalizada do ChatGPT; um segundo leu exatamente os mesmos textos gerados pelo chatbot, mas apresentados como texto fixo na tela, sem saber de onde vinham; o terceiro não recebeu material de apoio algum.

Antes de escrever, cada participante avaliou quão bem achava que podia explicar cada fenômeno; depois de redigir a explicação e reler o que escreveu, avaliou de novo. A "ilusão" foi medida como a distância entre a confiança declarada e o desempenho efetivo — e as explicações foram pontuadas por dois avaliadores independentes numa escala de 1 a 4.

Os números da ilusão

O grupo que conversou com o ChatGPT teve a maior distância entre confiança e desempenho. Na avaliação de qualidade, tirou em média 2,47 pontos, contra 2,75 do grupo que apenas leu os textos e 1,8 do grupo sem material de apoio. A análise da linguagem reforçou o quadro: quem conversou com o chatbot escreveu explicações médias de 43,8 palavras, com vocabulário menos variado, enquanto quem leu os mesmos textos produziu em média 59,6 palavras e se aproximou mais da redação original.

Como os dois primeiros grupos receberam informação idêntica, a diferença não está no conteúdo — está na forma de acessá-lo. "Ter acesso a uma boa explicação não significa, necessariamente, ter incorporado esse conhecimento", resumiu Ernesto Guerra. "Uma pessoa pode reconhecer e acompanhar uma explicação quando a tem diante de si, mas não necessariamente reconstruí-la depois por conta própria."

Hipóteses em aberto

O estudo não demonstra que o ChatGPT seja ruim para aprender, e os autores são explícitos quanto a isso: o que ele mede é um desajuste específico entre segurança e desempenho. Por que ele ocorre segue sem resposta. Aslanov lista três hipóteses — nenhuma comprovada: os usuários podem atribuir a si mesmos parte do conhecimento que na verdade está na ferramenta; a fluidez da conversa pode gerar uma sensação de compreensão maior do que a leitura; e as respostas podem influenciar por aparecerem palavra por palavra na tela, ao contrário de um texto estático.

O contexto chileno dá urgência à pergunta: segundo os pesquisadores, os resultados do PISA 2025 mostram que o uso de ferramentas de IA para estudar já é difundido entre os estudantes chilenos de 15 anos.

Limites e próximos passos

Há limitações declaradas: avaliou-se apenas o ChatGPT, com respostas pré-carregadas; participaram somente universitários; e o trabalho não identifica o mecanismo por trás da ilusão. A equipe planeja replicar o estudo com uma amostra maior e mais diversa e comparar duas formas de reduzir o efeito — ensinar como a IA funciona e quais são seus limites, ou treinar habilidades de pensamento crítico. Também quer verificar se o fenômeno se repete com estudantes escolares e na população geral.

Fontes

  1. CENIA — "Universitarios que conversan con ChatGPT creen entender más de lo que logran explicar, según estudio de investigador CENIA", 16/10/2026. https://cenia.cl/2026/10/16/universitarios-que-conversan-con-chatgpt-creen-entender-mas-de-lo-que-logran-explicar-segun-estudio-de-investigador-cenia/
  2. OSF Preprints — "Overconfidence without Understanding: AI Explanations Increase the Illusion of Explanatory Depth", preprint atualizado em out/2026, ainda não revisado por pares. DOI: 10.31234/osf.io/8psgf. https://doi.org/10.31234/osf.io/8psgf