Um professor permite ferramentas de IA em exames – eis o que ele aprendeu

As ferramentas de IA estão chegando às salas de aula: mesmo nas escolas de hoje, os alunos criam textos, apresentações, imagens e traduções com o clique de um botão. Como os professores podem lidar com as novas possibilidades da IA?

Para muitos professores, os trabalhos de casa, os trabalhos e os testes levantam a questão da autonomia. Como eles devem avaliar os exames se não estiver claro quem fez o trabalho – o examinado ou uma IA? Um reflexo comum aos desenvolvimentos digitais na educação é regular essas possibilidades, colocar dispositivos digitais em modo de exame sem acesso à rede ou banir ferramentas de IA.

O Evangelisch Stiftische Gymnasium em Gütersloh, na Alemanha, está adotando a abordagem oposta: laptops e iPads são amplamente usados ​​há 20 anos. GPT-3 e Co. estão sendo testados em aulas de alemão e são exigidos até mesmo para testes de classe.

Desde o início da pandemia, a escola vem experimentando formatos de exames digitais mais alinhados com as realidades da vida adulta. Parte dessa nova cultura é o uso de AI em exames: os alunos podem fazer todo ou parte de seu trabalho com a ajuda de texto AI.

Mas o uso de ferramentas de IA não contradiz a ideia central dos exames: que os alunos devem realizar por conta própria?

Não necessariamente. Existe uma regra que impede isso: as partes copiadas são marcadas como citações AI. No final, os alunos têm que justificar em uma reflexão por que eles pegaram certas partes de seu trabalho da IA ​​ou as escreveram intencionalmente.

Os alunos aprendem a responsabilidade pessoal por meio do uso de ferramentas de IA

A turma 8a espera tensa na sala de aula no dia do exame. Os alunos compõem argumentos escritos, como sempre em seus laptops – sem modo de exame, não há restrições de acesso à rede e eles têm acesso gratuito às ferramentas de IA. Eles inserem seus argumentos no formulário de entrada do sistema AI. Leva apenas alguns segundos para eles criarem o primeiro texto.

Engana-se quem pensa que os alunos agora podem sentar e relaxar. O trabalho deles está apenas começando: eles precisam examinar criticamente o texto da IA.

Nas aulas anteriores, os alunos aprenderam que não é sensato simplesmente adotar textos gerados por IA : Na semana que antecedeu o trabalho escolar, por exemplo, eles discutiram se o uso de smartphones deveria ser permitido nas escolas.

A maioria dos textos produzidos pela IA defendia a proibição de smartphones e exaltava as virtudes do ensino totalmente analógico, às vezes com argumentos estranhos que careciam de evidências, como o de que os alunos enviam muitas mensagens SMS na escola.

Quatro problemas com textos de IA e como os alunos lidam com eles

  • Os textos de IA às vezes refletem estereótipos sociais e visões conservadoras.
  • Os textos AI dependem de informações desatualizadas – por exemplo, GPT-3 foi atualizado pela última vez em 2019.
  • Gramaticalmente e estilisticamente, muitos textos de IA em alemão precisam de grandes melhorias.
  • As atribuições de trabalho geralmente são mal cumpridas pelos AIs, ou o AI se desvia do tópico e fornece poucas evidências para argumentos.

A troca de idiomas mostra aos alunos quanto espaço há para melhorias: os textos de IA em inglês são significativamente mais atualizados, sofisticados e consistentes do que os textos em alemão.

Isso incentivou os alunos a combinar diferentes ferramentas de IA: eles começaram com um prompt em inglês para gerar texto em inglês. Para a tradução para o alemão, eles também usaram uma ferramenta de IA (deepl.com). Isso foi seguido por revisão estilística e gramatical usando LanguageTool ou Papyrus Author.

No exame, nenhum aluno fica satisfeito com o texto AI que criou. Passagens adequadas são adotadas pelos alunos em sua argumentação. Principalmente, no entanto, os textos de IA servem como uma pedreira para ideias ou como uma pedra de amolar para sua posição, pois são confrontados com novos argumentos que contradizem os seus próprios.

Muitos alunos fazem pesquisas adicionais na Internet para verificar as informações nos textos de IA ou para filtrar evidências adicionais, opiniões de especialistas e estudos. Freqüentemente, conforme descrito acima, eles combinam várias ferramentas de IA para obter melhores resultados.

Após 90 minutos, os alunos apresentam as duas partes – a parte da argumentação e a parte da reflexão. Eles terão o mesmo peso na classificação.

Os alunos não confiam cegamente na IA

Os exames de IA produziram uma descoberta importante: nenhum aluno confiava cegamente nos textos de IA. Além disso, aqueles que não souberam construir e escrever um argumento antes do teste e não tinham experiência ficaram sobrecarregados ao lidar com os textos da IA, adotaram informações incorretas acriticamente e não se beneficiaram do raciocínio sugerido.

Os alunos acharam as sugestões de texto da IA ​​úteis, pois facilitaram o trabalho. Eles também gostariam de usar ferramentas de IA em sala de aula no futuro.

Talvez o desejo deles se torne realidade em breve: a próxima ideia da escola é alimentar a imagem AI DALL-E 2 com textos literários. Os alunos devem então fazer a sua própria análise do texto com base nas imagens geradas, que podem ser entendidas como uma interpretação visual do texto.

Em suma, a IA cria novas oportunidades de ensino, mas também o torna mais desafiador: uma parte dos alunos usará a IA para fazer menos trabalho e apresentar produtos de IA como seus resultados. Outra parte usará ferramentas de IA para terceirizar tarefas rotineiras que domina há muito tempo para ter mais tempo para questões complexas e interessantes. Por isso mesmo, tratar da IA ​​e seu uso reflexivo nas escolas é também uma questão de equidade educacional.

O Evangelisch Stiftisches Gymnasium está procurando parceiros que queiram testar outros possíveis usos da IA ​​nas escolas. Se você estiver interessado em uma colaboração, entre em contato com Hendrik Haverkamp via Twitter ou Linkedin .