Como avaliamos a deteção de IA
Um detetor que vai defender perante um estudante, um editor ou um regulador tem de mostrar o seu trabalho. Eis como testamos, o que medimos e onde estão os limites.
Como testamos
Avaliamos com um teste equilibrado de texto humano e gerado por IA. O conjunto humano provém de fontes anteriores à IA generativa em massa e de escrita original verificada; o conjunto de IA é produzido com vários modelos e estilos de prompt, incluindo variantes parafraseadas e «humanizadas» concebidas para evadir a deteção.
Fundamental: o teste é construído por idioma. Não traduzimos os dados para inglês; cada língua românica é avaliada em texto nativo, porque a tradução apaga os sinais em que a deteção se baseia.
Modelos no teste
GPT-4o · Gemini · Claude · Copilot · Llama · Mistral
Porque os falsos positivos importam mais
Para docentes, editores e equipas de conformidade, o erro caro é acusar erradamente uma pessoa. Os resultados devem ser revistos com provas por frase, rascunhos, histórico e contexto.
Limitações assumidas
Nenhum detetor é infalível e quem afirmar o contrário deve preocupá-lo. Os nossos resultados são mais fracos em:
- Texto muito curto. Uma ou duas frases raramente têm sinal suficiente para um veredicto fiável.
- Híbridos muito editados. Texto humano reescrito frase a frase com IA é uma verdadeira zona cinzenta.
- Géneros muito formulaicos. Modelos legais e técnicos podem parecer mecânicos mesmo escritos por um humano.
Recomendamos tratar uma pontuação como prova sólida para investigar - analisada com rascunhos, histórico e contexto - e não como prova por si só.
Conheça o detetor por trás dos números
Partilhe o seu caso de uso, volume, idiomas e requisitos de privacidade.