Cosa fare quando un elaborato inviato da uno studente viene segnalato come generato dall'intelligenza artificiale

Stai correggendo i compiti, leggendoli uno per uno, finché uno di essi non attira la tua attenzione. Non riesci a capire esattamente perché, ma non sembra scritto dal tuo studente. Sembra scritto da un'intelligenza artificiale. Quindi lo inserisci in Pangram e ottieni un risultato: 99% IA. Cosa fai a questo punto?

Capire cosa significa

Un rilevatore di IA come Pangram è addestrato a individuare gli indizi che indicano che un testo è stato scritto da un'intelligenza artificiale. Se un segmento di testo ottiene un punteggio di IA del 99%, ciò non significa necessariamente che riteniamo che l'intero testo sia stato generato dall'IA. Piuttosto, siamo sicuri al 99% che l'IA sia stata utilizzata per generare una parte del testo.

Nei documenti più lunghi, suddividiamo il testo in segmenti. In questo modo puoi esaminare i segmenti per verificare se tutti presentano un livello elevato di affidabilità dell'IA o se si tratta solo di una parte del testo.

Parla con il tuo studente

Consiglio sempre di fare una cosa molto semplice: parlare con il proprio studente.

Potresti chiedere loro come hanno lavorato al testo per cercare di capire quanto bene conoscono il proprio elaborato. Oppure potresti semplicemente chiedere se hanno usato l'intelligenza artificiale. Potrebbero ammetterlo: magari erano sommersi dal lavoro e hanno dovuto scegliere un compito su cui prendere una scorciatoia. Oppure hanno scritto una prima bozza e non erano soddisfatti del risultato, quindi hanno chiesto a ChatGPT di migliorarla.

Questa è un'ottima occasione per discutere su cosa costituisca o meno una violazione dell'integrità accademica. Puoi ricordare al tuo studente come dovrebbe gestire una situazione del genere in futuro. Dovrebbe chiedere una proroga? O semplicemente consegnare quella prima bozza non valida prima della verifica dell'integrità accademica?

Potresti anche indirizzare lo studente verso strumenti di intelligenza artificiale adatti alle scuole e che contribuiscano a favorire l'apprendimento, invece di ricorrere a scorciatoie.

Verificare se ci sono malintesi

A volte c'è una discrepanza tra ciò che un insegnante considera un caso di frode, ciò che uno studente considera un caso di frode e ciò che fa scattare un rilevatore basato sull'intelligenza artificiale. Ecco alcuni modi comuni di utilizzare l'intelligenza artificiale che potrebbero far scattare il rilevamento.

• Programmi di controllo grammaticale come Grammarly che integrano l'assistenza dell'intelligenza artificiale nel processo di scrittura
• Strumenti di traduzione: spesso si basano su modelli di linguaggio di grandi dimensioni (LLM)
• Rilevare le funzionalità AI di Google Docs come "Aiutami a scrivere"
• Utilizzare ChatGPT per il brainstorming e la ricerca, e riutilizzare le frasi generate dall'IA
• Utilizzare ChatGPT per ricevere consigli sulla formulazione

Consigliamo di adottare una politica sull'IA, come questo sistema a livelli, per garantire che studenti e docenti siano allineati riguardo agli strumenti di supporto consentiti. Ciò evita malintesi, come nel caso in cui un docente autorizzi l'uso di Grammarly senza rendersi conto che ormai si tratta di un assistente di scrittura basato interamente sull'IA, ma utilizzi anche un rilevatore di IA che segnalerebbe gli studenti che utilizzano le funzionalità di IA di Grammarly.

Esamina i risultati del processo di scrittura

Supponiamo che il tuo studente abbia ammesso di aver utilizzato alcune formulazioni tratte da ChatGPT. Oppure che sostenga che il suo sia un raro caso di falso positivo. La mossa migliore da fare per scagionarlo e confermare che abbia svolto il lavoro è esaminare le tracce del processo di scrittura. Che tipo di ricerca ha svolto per questo compito? Ha preso appunti? Ha salvato le prime bozze?

Se hanno lavorato su Google Docs, seleziona File -> Cronologia versioni -> Visualizza cronologia versioni per vedere la cronologia completa del loro processo di scrittura. Sarà chiaro se hanno semplicemente copiato da ChatGPT e incollato nel file oppure se hanno digitato il testo tutto d'un fiato dall'inizio alla fine (un segno che hanno usato l'assistenza dell'IA ma hanno voluto simulare il processo di scrittura). Se hanno una solida cronologia di scrittura di diverse ore, allora questa è una prova molto convincente del fatto che abbiano scritto il lavoro da soli.

Valutate bene la posta in gioco

Derek Newton, autore della newsletter sull'integrità accademica *The Cheat Sheet*, paragona spesso i rilevatori basati sull'intelligenza artificiale ai metal detector. Quando si attraversa un metal detector e questo suona, non si viene immediatamente arrestati e mandati in prigione. Al contrario, si procede a ulteriori indagini. Hai davvero cercato di portare una pistola attraverso i controlli di sicurezza o la fibbia della tua cintura è semplicemente di metallo? Allo stesso modo, crediamo che il rilevamento tramite IA sia un ottimo modo per segnalare i compiti, ma il rilevamento richiede ulteriori indagini prima di qualsiasi misura punitiva. Un tasso di falsi positivi diverso da zero significa che qualsiasi rilevamento positivo potrebbe essere reale, oppure potrebbe trattarsi di quella situazione statisticamente anomala, una su diecimila, in cui Pangram sbaglia.

Se lo studente potesse dimostrare di aver seguito un processo di scrittura, sarei propenso a credergli. Nel peggiore dei casi, imparerà la lezione e non ricorrerà più all'aiuto dell'intelligenza artificiale, nemmeno in modo superficiale.

Se lo studente ha già avuto casi in cui i propri lavori sono stati individuati dall'intelligenza artificiale, anche questo dovrebbe essere preso in considerazione. Potrebbe beneficiare del dubbio una volta, ma più volte ciò accade, più diventa evidente che c'è un problema.

Spero che questa guida possa essere d'aiuto a chiunque si trovi a dover affrontare le complessità del plagio generato dall'intelligenza artificiale. Si tratta di una situazione complessa, ed è per questo che è importante che gli insegnanti dispongano degli strumenti di intelligenza artificiale e delle informazioni necessarie per gestire un caso del genere qualora dovesse presentarsi.