"Penso che quello che abbiamo scoperto è che va bene usare l'intelligenza artificiale, devi solo stare attento e non puoi prenderlo parola per parola", ha detto Gina Girgente, che si è laureata in geografia la primavera scorsa. "Non è sicuramente un metodo infallibile."

Girgente faceva parte di un gruppo di ricerca interdisciplinare che ha posto domande su tre rischi legati al cambiamento climatico (tempeste tropicali, inondazioni e siccità) in 191 paesi sia alla versione gratuita che a quella a pagamento di ChatGPT. Sviluppato da OpenAI Inc., ChatGPT è un modello di linguaggio di grandi dimensioni progettato per comprendere domande e generare risposte testuali in base alle richieste degli utenti.

Il gruppo ha poi confrontato le risposte dei chatbot con gli indici di rischio generati utilizzando i dati del Gruppo intergovernativo sui cambiamenti climatici, un organismo delle Nazioni Unite incaricato di valutare la scienza relativa al cambiamento climatico.

"Nel complesso, abbiamo trovato più accordo che no", ha affermato Carmen Atkins, autrice principale e dottoranda al secondo anno. studente del Dipartimento di Geoscienze. "I risultati generati dall'intelligenza artificiale erano accurati più della metà delle volte, ma la precisione era maggiore con le tempeste tropicali e minore con i periodi di siccità."

In un articolo pubblicato su Communications Earth &Environment , il gruppo ha riportato le risposte di ChatGPT4 allineate agli indici con i seguenti gradi di precisione:

• Tempeste tropicali:80,6%
• Inondazioni:76,4%
• Siccità:69,1%

Hanno anche scoperto che la precisione del chatbot aumentava quando veniva chiesto loro riguardo ai paesi più sviluppati e che la versione a pagamento della piattaforma, attualmente ChatGPT-4, era più precisa della versione gratuita, che all'epoca era ChatGPT-3.5.

Hanno trovato meno coerenza nelle risposte sullo stesso argomento quando è stato chiesto loro su alcune regioni, in particolare molti paesi dell’Africa e del Medio Oriente, che sono considerati paesi a basso reddito o in via di sviluppo. E hanno scoperto che la versione a pagamento della piattaforma, attualmente ChatGPT-4, era più precisa della versione gratuita, che all'epoca era ChatGPT-3.5.

"Siamo i primi a esaminare la questione in modo sistematico, per quanto ne sappiamo, e oltre a ciò, è davvero un invito all'azione affinché più persone esaminino la questione", ha affermato Atkins.

Secondo la pubblicazione, i ricercatori hanno scelto il servizio ChatGPT per la sua popolarità, in particolare tra gli utenti di età compresa tra 18 e 34 anni, e per il suo tasso di utilizzo nei paesi in via di sviluppo.

Atkins e Girgente, che saranno studenti laureati all'Università di Denver in autunno, hanno detto che l'idea del progetto è nata dal tempo trascorso nella classe di Junghwan Kim, un assistente professore del Dipartimento di Geografia. Lì, Kim ha condiviso alcune delle sue ricerche studiando i pregiudizi geografici in ChatGPT quando gli è stato chiesto su argomenti di giustizia ambientale.

"Ha aperto l'intera idea delle diverse cose che potremmo guardare con ChatGPT", ha detto Atkins. "E per me, personalmente, il cambiamento climatico e in particolare l'alfabetizzazione sul cambiamento climatico, che è fondamentale per combattere la disinformazione, mi ha fatto venire voglia di vedere se ChatGPT potesse essere utile o dannoso per questo problema."

Kim è anche coautore di questo nuovo studio, così come Manoochehr Shirzaei, professore associato di geofisica e telerilevamento.

Kim ha affermato che ritiene che sarebbe particolarmente importante condividere i risultati con gli studenti che potrebbero riporre troppa fiducia nei chatbot e che questi hanno avuto un impatto anche sul suo utilizzo del software.

Sebbene il gruppo ritenga che i risultati dimostrino la chiara necessità di un approccio cauto all'uso dell'intelligenza artificiale generativa, ritiene anche che questo studio sia solo l'inizio della ricerca necessaria, che dovrà essere ripetuta man mano che i diversi software continuano ad evolversi.

"Questa è solo la punta dell'iceberg e, più di ogni altra cosa, vogliamo solo attirare l'attenzione su questi problemi", ha detto Atkins. "L'intelligenza artificiale generativa fa ormai parte del nostro mondo, ma dobbiamo utilizzarla nel modo più informato possibile."