De certa forma, os participantes do estudo não sabiam que estavam participando do estudo, mas temos as permissões necessárias para prosseguir com isso ”, afirma Scarfe.”A idéia era enviar essas respostas sem nenhuma edição, além dos ensaios, onde aplicamos a formatação mínima”, diz Scarfe.Os relatórios anedóticos eram verdadeiros – o uso da IA não foi amplamente detectado e, em média, o ChatGPT marcou melhor do que os estudantes humanos.”O problema com essas ferramentas é que elas geralmente têm um bom desempenho em um laboratório, mas seu desempenho cai significativamente no mundo real”, explicou Scarfe.Mas, de acordo com a equipe de Scarfe, a versão beta lançada deste sistema teve um desempenho significativamente pior.
