O ChatGPT inventou uma referência? Como descobrir antes da banca
Acontece com o ChatGPT e com qualquer outra IA de texto. A referência vem bem formatada, com autor conhecido e revista de verdade, e a obra simplesmente não existe.
Por que isso acontece
A IA não consulta uma biblioteca quando escreve uma referência. Ela escreve um texto que se parece com uma referência, porque leu milhões delas. O resultado costuma juntar pedaços reais: um autor que existe, uma revista que existe, um título que soa certo. A soma é que nunca foi publicada.
Os três tipos de erro
- A obra não existe. Título, autores e revista nunca estiveram juntos em lugar nenhum.
- A obra existe, com dado errado. O artigo é real, mas o ano, o volume ou um dos autores foi trocado. É o erro mais difícil de ver, porque uma busca rápida pelo título acha o artigo.
- O DOI é de outra obra. O DOI existe e abre, só que leva a um artigo diferente do citado.
Como conferir à mão
- Procure o título inteiro, entre aspas, no Google Acadêmico. Se não aparecer nada idêntico, desconfie.
- Se a referência tem DOI, abra
https://doi.org/seguido do DOI. Veja se a página que abre tem o mesmo título e os mesmos autores. - Confira ano, volume, número e páginas na página da revista, e não só o título.
- Para livro, procure no catálogo da biblioteca da tua universidade ou no site da editora.
Numa lista de quarenta referências, isso leva uma tarde.
O Confere faz essa conferência por você. Cola a lista e cada referência é procurada em bases públicas de artigos e livros. Você vê qual foi achada, qual tem ano, autor ou DOI que não bate, e qual não aparece em base nenhuma, sempre com o registro da base para conferir com os próprios olhos.
Conferir minhas referênciasO que "não achei" quer dizer
Não achar uma obra não prova que ela foi inventada. Livro antigo, relatório técnico, capítulo e página de site costumam ficar de fora das bases. O que o resultado diz é: esta é a primeira que vale abrir e conferir à mão.
O que nenhuma ferramenta faz por você
Conferir que a obra existe não é conferir que ela diz o que o teu texto afirma. A IA também atribui a um artigo real uma ideia que não está nele. Para isso só há um caminho: abrir a obra e ler o trecho.