Notas caem para metade quando a IA sai da sala de exame
Um professor de Brown suspeita que a maioria da turma copiou com IA após um teste em casa quase perfeito. No exame vigiado, as notas desabaram. Os dados globais apontam na mesma direção.
Um professor de Brown suspeita que a maioria da turma copiou com IA após um teste em casa quase perfeito. No exame vigiado, as notas desabaram. Os dados globais apontam na mesma direção.
Um exame em casa com média de 96% num curso de Economia em Brown acendeu todos os alarmes. O professor Roberto Serrano pegou nas perguntas, meteu-as no ChatGPT e recebeu respostas praticamente iguais às dos alunos, incluindo um método de resolução mais rebuscado que o necessário. O padrão era claro. Não era súbita genialidade coletiva. Era dependência de IA generativa.
Perante isto, Serrano fez o óbvio que muita instituição ainda evita: transformou o exame final numa prova presencial, vigiada. De 86 inscritos, 18 desistiram antes do exame e nove nem apareceram. A média caiu para 48,6%, o pior resultado de sempre da cadeira. Só um punhado de alunos se aproximou das notas brilhantes do teste em casa. Dezanove chumbaram. Três estudantes que tinham feito 100% no primeiro exame tiraram literalmente zero no final.
A reação da universidade foi burocrática. Pediram ao professor que sinalizasse caso a caso. Numa turma em que praticamente todo o gráfico de notas se afunda quando a IA sai da equação, isto é uma forma polida de empurrar o problema com a barriga. Serrano foi frontal: se aceitarmos que uma fatia grande dos melhores alunos acha normal copiar com IA, estamos a escolher uma sociedade mais burra. A frase é dura, mas a curva de notas não é meiga.
O caso encaixa em dados mais amplos. Um estudo com mais de 26 mil alunos na China, do 7.º ao 12.º ano, acompanhados durante 30 meses, encontrou o mesmo desequilíbrio: seis meses após começarem a usar IA, as notas dos trabalhos de casa subiram cerca de 18% e o tempo de execução caiu de 64 para 45 minutos. Nos exames, porém, as notas caíram por volta de 20%. Nos exames de acesso, a perda a longo prazo foi entre 18% e 24%, com o efeito completo a demorar dois anos a aparecer. Pior: os melhores alunos foram os mais prejudicados.
Uma análise da UC Berkeley a mais de 500 mil classificações numa grande universidade do Texas reforça o quadro. Depois do lançamento do ChatGPT, a percentagem de notas A subiu 13 pontos percentuais em cadeiras carregadas de trabalhos de escrita e programação, sobretudo onde o peso da avaliação contínua era alto e os exames vigiados tinham menos peso. Ou seja, onde é fácil colar com IA, as notas disparam. Onde é difícil, a realidade aparece crua.
Para universidades portuguesas, este não é um drama distante do Ivy League. É o retrato do que acontece quando se fala de IA como ferramenta neutra mas se mantém um modelo de avaliação pensado para outro mundo. Ou se muda a avaliação, assumindo explicitamente o uso de IA e pedindo coisas que não dá para delegar num chatbot, ou se reforça o controlo nos momentos críticos. Fingir que nada se passa é repetir o erro de quem achou que a IA era só mais uma moda, até começar a escrever leis sozinha.
Fonte: The Decoder
Comentários · 0