O ChatGPT pode igualar ou até mesmo exceder a nota média dos estudantes universitários ao responder questões de avaliação em uma variedade de disciplinas, incluindo ciência da computação, estudos políticos, engenharia e psicologia, relata um artigo publicado na Scientific Reports . A pesquisa também descobriu que quase três quartos dos alunos pesquisados usariam o ChatGPT para ajudar em suas tarefas, apesar de muitos educadores considerarem seu uso um plágio.

Para investigar o desempenho do ChatGPT ao redigir avaliações universitárias em comparação com os alunos, Talal Rahwan e Yasir Zaki convidaram membros do corpo docente que ministraram 32 cursos diferentes na Universidade de Nova York Abu Dhabi (NYUAD) para fornecer três envios de alunos, cada um, para 10 questões de avaliação que eles haviam definido.

O ChatGPT foi então solicitado a produzir três conjuntos de respostas para as dez perguntas, que foram então avaliadas juntamente com as respostas escritas pelos alunos por três alunos (que não tinham conhecimento da fonte das respostas). As respostas geradas pelo ChatGPT alcançaram uma nota média semelhante ou superior à dos alunos em nove dos 32 cursos.

Apenas os cursos de matemática e economia viram os alunos superarem consistentemente o ChatGPT. O ChatGPT superou os alunos de forma mais marcante no curso "Introdução às Políticas Públicas", onde sua nota média foi de 9,56 em comparação com 4,39 dos alunos.

Os autores também pesquisaram opiniões sobre se o ChatGPT poderia ser usado para auxiliar nas tarefas universitárias entre 1.601 indivíduos do Brasil, Índia, Japão, EUA e Reino Unido (incluindo pelo menos 200 estudantes e 100 educadores de cada país). Cerca de 74% dos alunos indicaram que usariam o ChatGPT em seus trabalhos.

Em contraste, em todos os países, os educadores subestimaram a proporção de estudantes que planeiam usar o ChatGPT e 70% dos educadores relataram que tratariam a sua utilização como plágio.

Finalmente, os autores relatam que duas ferramentas para identificar texto gerado por IA – GPTZero e classificador de texto AI – classificaram erroneamente as respostas ChatGPT geradas nesta pesquisa como escritas por um humano 32% e 49% das vezes, respectivamente.

Juntas, essas descobertas oferecem insights que podem informar as políticas para o uso de ferramentas de IA em ambientes educacionais.