Quando uma ferramenta produz em segundos uma resposta organizada e convincente, o texto entregue já não basta para mostrar quanto o aluno compreendeu. Avaliar na era da IA exige observar também processo, escolhas, justificativas e capacidade de defender o que foi feito.
Texto 1 de 5
Série: ChatGPT na educação – autoria, avaliação e pesquisa
O problema não começou com o ChatGPT
Um trabalho bem escrito nunca foi prova perfeita de aprendizagem. Ele poderia ser copiado, comprado, excessivamente corrigido por outra pessoa ou simplesmente montado sem grande compreensão do assunto.
A IA generativa ampliou essa dificuldade porque tornou muito mais fácil produzir respostas plausíveis fora da sala de aula.
Isso acontece, em parte, porque sistemas como o ChatGPT são capazes de gerar linguagem muito convincente.
Para entender melhor esse mecanismo, vale a leitura de O que é um modelo de linguagem: como o ChatGPT, o Claude e outros aprendem.
Para quem avalia, surge então uma pergunta mais importante do que simplesmente descobrir se houve uso de IA:
o que esta atividade permite afirmar sobre aquilo que o aluno realmente sabe e consegue fazer?
Antes de avaliar, defina o que precisa ser demonstrado
Nem toda atividade precisa proibir IA. Nem toda atividade precisa permiti-la.
A decisão depende daquilo que está sendo avaliado.
Se o objetivo é verificar se o estudante consegue executar determinada habilidade sem assistência, algum momento supervisionado pode ser necessário.
Se a atividade envolve pesquisar, comparar alternativas, produzir análises ou trabalhar com ferramentas que fazem parte da prática profissional, o uso declarado de IA pode fazer sentido.
O problema aparece quando o produto final vira a única evidência de aprendizagem.
Cinco maneiras de melhorar a avaliação
1. Deixe as regras claras antes da atividade
O estudante precisa saber:
- se pode usar IA;
- em quais etapas;
- o que deve declarar;
- quais partes precisam ser produzidas por ele;
- como esse uso será considerado na avaliação.
Isso é muito melhor do que estabelecer regras vagas e depois tentar descobrir, pela aparência do texto, como ele foi produzido.
2. Observe um pouco do processo
Não é necessário transformar cada atividade em investigação policial.
Em trabalhos maiores, algumas evidências intermediárias podem ajudar:
- proposta inicial;
- referências escolhidas;
- esboço ou primeira versão;
- decisões tomadas durante o trabalho;
- registro do uso de IA, quando ela for permitida.
O objetivo é simples: não conhecer apenas a fotografia final quando o percurso também importa.
3. Peça justificativas
Uma resposta pode estar correta sem que o estudante consiga explicar por quê. Do outro lado da mesa acontece o mesmo: nem quem constrói o sistema explica todo resultado que ele produz.
Por isso, perguntas curtas depois da entrega podem revelar bastante:
- Por que você escolheu esta fonte?
- Qual conceito sustenta esta conclusão?
- O que mudaria se determinado dado fosse diferente?
- Qual foi a parte mais difícil da análise?
- Onde você discorda do resultado apresentado?
Uma breve defesa oral, presencial ou não, pode complementar o trabalho escrito sem exigir outra prova inteira.
4. Contextualize a atividade, mas sem imaginar que isso resolve tudo
Usar casos locais, dados específicos da turma, experiências profissionais ou situações concretas pode melhorar muito uma atividade porque exige aplicação do conhecimento.
Mas há uma ressalva importante.
Em estudo publicado no British Journal of Educational Technology, Alexander Kofinas, Crystal Tsay e David Pike testaram a capacidade da IA generativa de responder a avaliações autênticas, justamente aquelas desenhadas para se aproximar de problemas e situações reais.
O resultado pede cautela: a IA conseguiu gerar trabalhos que passaram pelo julgamento de avaliadores experientes. Os autores concluem que avaliações autênticas, sozinhas, não garantem integridade acadêmica.
Portanto, contextualizar continua sendo uma boa estratégia pedagógica. Só não deve ser tratada como uma espécie de vacina contra o ChatGPT.
5. Combine evidências diferentes
Uma redação feita em casa não precisa carregar sozinha todo o peso da avaliação.
Dependendo da disciplina, é possível combinar:
- trabalho escrito;
- resolução de problema;
- apresentação;
- defesa breve;
- atividade supervisionada;
- análise de caso;
- revisão crítica do próprio trabalho.
Não significa aplicar sete avaliações.
Significa evitar que uma única evidência facilmente terceirizável determine tudo.
E os detectores de texto produzido por IA?
A tentação é compreensível.
O estudante entrega o trabalho, um sistema fornece uma porcentagem e pronto: aparentemente temos uma resposta objetiva.
Só que a pesquisa não sustenta tamanha segurança.
Debora Weber-Wulff e outros pesquisadores testaram 12 detectores públicos e dois sistemas comerciais, incluindo ferramentas usadas no ambiente acadêmico.
Encontraram falsos positivos, falsos negativos e redução importante de desempenho quando os textos eram modificados, parafraseados ou traduzidos.
A conclusão dos autores é especialmente relevante para instituições de ensino: o resultado de um detector não deve servir sozinho como prova de fraude acadêmica.
Isso não significa que essas ferramentas sejam absolutamente inúteis. Um resultado pode levantar uma dúvida e justificar uma verificação adicional.
Mas há uma distância enorme entre:
“vale a pena olhar melhor este trabalho”
e
“o sistema mostrou 87%, portanto o aluno fraudou”.
Essa distância importa.
A própria IA pode virar parte da avaliação
Há ainda uma alternativa interessante: em vez de tentar eliminar o ChatGPT da atividade, transformar seu uso em objeto de análise.
Por exemplo, o aluno pode:
- gerar uma resposta com IA;
- identificar as principais afirmações;
- verificá-las em fontes confiáveis;
- apontar erros, omissões ou simplificações;
- produzir uma versão melhor;
- justificar as alterações.
Nesse desenho, copiar a resposta da máquina praticamente não resolve a atividade.
O que está sendo avaliado é justamente a capacidade de examinar, verificar, corrigir e tomar decisões sobre aquilo que a IA produziu.
Avaliar aprendizagem, não aparência de autoria
A presença do ChatGPT torna mais difícil usar o texto final como atalho para inferir aprendizagem.
Mas também expõe uma fragilidade que já existia.
Se a única pergunta for “quem escreveu estas frases?”, a avaliação ficará presa a uma disputa tecnológica entre geração e detecção.
Perguntas melhores são:
- o estudante compreendeu?
- consegue explicar?
- sabe aplicar?
- consegue verificar uma informação?
- reconhece um erro?
- consegue justificar suas decisões?
Um texto bonito continua tendo seu valor. Só não conta, sozinho, a história inteira.
Próximo texto da série:
Autoria e ChatGPT: quem é responsável por um texto gerado com IA?
Se este texto puder ajudar outros professores a repensar uma avaliação, compartilhe.