Palavras como “imperfeito”, “examinar” e “aparente” são muito avançadas para um aluno do 12º ano usar, de acordo com a inteligência artificial, e são consideradas evidências de plágio.
Aqui estão outras palavras do programa de IA que o ChatGPT considerou boas demais para um aluno de alto desempenho da Cambridge High School, levando a escola a reprovar em sua avaliação.
“Contrapartes vibrantes; localização não pastel; perceber melhor; transmitindo efetivamente a intensidade de; utilizando, enfatizando e realizando [for their American spellings]; prejudicial; induzir; eventual; empregado; e presença online”.
Apesar de ser uma aluna de nível de excelência, a professora da menina sinalizou seu trabalho como potencialmente plagiado e o alimentou por meio do ChatGPT.
Anúncio
O ChatGPT, lançado em novembro do ano passado, é um chatbot de inteligência artificial que gera texto.
“O verificador de IA sugeriu que partes de seu trabalho foram escritas por IA”, disse a diretora assistente da Cambridge High School, Joanna Bartch, à mãe da menina.
“[The excerpts from her work] indicam para nós que o software AI foi usado por [student] na preparação de sua avaliação interna da NCEA.”
Mas a menina estava convencida de que o trabalho era dela, e sua mãe descreveu o uso de IA pelos professores para detectar plágio como “roleta russa” da infalibilidade.
Anúncio
Na semana passada, o Arauto relatou a história da menina, junto com a de outro aluno da Pukekohe High School. Desde então, inúmeros pais e educadores preocupados compartilharam exemplos semelhantes.
“Tenho certeza de que você concordará que as palavras … não são palavras suspeitas ou notáveis. Minha filha tem um vocabulário excelente e bem desenvolvido. Ela é madura, articulada e uma leitora prolífica”, disse a mãe.
As frases eram da avaliação de inglês NCEA nível 2 da menina: “Analisar aspectos significativos de um trecho de um filme”.
A garota no centro da grande acusação de traição escolheu analisar um episódio de Espelho preto – um programa de televisão britânico sobre “pessoas lutando com os efeitos manipuladores da tecnologia de ponta”, de acordo com uma descrição online.
Especialistas disseram que a disponibilidade de ferramentas de IA tornou “a oportunidade para trapaças e todo tipo de má conduta… aparentemente interminável”.
O tecnólogo educacional Francis Valintine disse ao Arauto seguindo nosso primeiro relatório sobre as alegações na semana passada de que seria perigoso se as autoridades educacionais começassem a acusar as pessoas de usar IA para trapacear quando nem sempre era preciso.
“Não há 100% de certeza sobre qualquer ferramenta e ninguém afirma ter essa ferramenta mágica”, disse Valintine.
A mãe da menina disse ao Arauto: “Obviamente [the school] estavam percebendo que tinham que lidar com essa inteligência artificial, que sem dúvida algumas crianças usarão – minha filha conhece pessoas que usam.
“Mas o que me incomoda é que o ChatGPT não é confiável e ainda assim é o método de triagem [for work]então, você sabe, sem dúvida eles vão chamar as crianças incorretamente ”, disse ela.
“Como ela vai se sentir toda vez que entregar algo, agora que seu robô vai acusá-la de ser artificialmente inteligente?”
Anúncio
O NZQA aconselhou as escolas sobre o uso de inteligência artificial em fevereiro – observando que a chegada do ChatGPT estava soando o alarme no setor educacional.
“Na pior das hipóteses, o chatbot pode produzir redações, relatórios, etc. de qualidade sobre qualquer tópico, que podem escapar da detecção por verificações regulares de plágio e passar como trabalho do aluno”, disse NZQA.
A NZQA lista três programas que as escolas podem usar para detectar plágio – AI Writing Check, AICheatCheck e Turnitin – que já foram usados em escolas e universidades.
Mas o NZQA também disse que pode ser “quase impossível” impedir os alunos de usar a tecnologia de IA.
O vice-presidente executivo de avaliação da NZQA, Jann Marshall, disse que eles não dizem às escolas exatamente como devem verificar se o trabalho é autêntico.
“Embora as ferramentas de detecção de IA estejam se desenvolvendo rapidamente e possam ser úteis, elas não são infalíveis”, disse Marshall.
Anúncio
O diretor da Cambridge High School, Greg Thornton, disse que os procedimentos da escola estão de acordo com as orientações oficiais.
“Revisamos o trabalho de cada aluno usando o julgamento do professor. Apenas os roteiros que não são considerados como potencialmente de autoria do aluno são investigados mais a fundo”, disse.
Thornton disse que o julgamento do professor envolvia observar os trabalhos anteriores dos alunos e seu “desempenho geral” em sala de aula.
Ele não quis comentar sobre o caso específico envolvendo o aluno, mas delineou o processo da escola para lidar com possíveis plágios.
“Não é apropriado discutir [the mother’s] preocupações neste momento, pois estou conversando com ela de acordo com nosso procedimento de preocupações e reclamações ”, disse Thornton.
A mãe da menina duvidou de quão preciso era o julgamento de qualquer professor sobre o trabalho de sua filha: “O julgamento profissional não era confiável, pois seu professor de inglês é professor do primeiro ano [with] 11 semanas de experiência.
Anúncio
“Sem dúvida esta é a primeira avaliação [the teacher] marcou”, disse ela.
“[The head of English] também não acha que as palavras são prováveis para um aluno do 12º ano. No entanto, dado [she] então confirmou que nunca conheceu ou conversou com minha filha, ou se referiu a qualquer um de seus trabalhos anteriores, não considero [her] realizar qualquer julgamento relevante.
“Além disso … ChatGPT agora é amplamente conhecido e reconhecido como não confiável, perigoso, inconsistente, cheio de falsidades. E isso é exatamente o que me disseram de dentro de sua própria equipe de professores ”, disse ela.
Quando o Arauto perguntou ao ChatGPT – diretamente – se poderia detectar se o trabalho foi plagiado, o programa de computador ofereceu esta resposta: “Eu certamente posso ajudar a detectar plágio em um texto”.
“No entanto”, continuou, “é importante observar que não tenho acesso a todas as fontes possíveis de informação, portanto minha análise pode não ser exaustiva. Além disso, embora eu possa sinalizar passagens que correspondem a outras fontes, cabe a um avaliador humano determinar se as semelhanças constituem ou não plágio.”
O investigador principal do Projeto de Pesquisa sobre Integridade Acadêmica na Nova Zelândia (Rainz) e o professor associado da Universidade de Auckland, Jason Stephens, pesquisam a trapaça há duas décadas.
Anúncio
Stephens disse que o problema era que as ferramentas de inteligência artificial “chegaram da noite para o dia”.
“Este não é apenas um desenvolvimento tecnológico, é uma revolução tecnológica”, disse.
“Na educação, isso significa repensar não apenas como ensinamos e avaliamos o aprendizado, mas o que estamos ensinando e avaliando.”
Discussão sobre isso post