Studio ritirato sull'educazione con ChatGPT solleva dubbi sull'integrità della ricerca sull'IA
Quasi un anno dopo la sua pubblicazione, una meta-analisi su Humanities and Social Sciences Communications che affermava che ChatGPT di OpenAI migliora l'apprendimento degli studenti è stata ritirata da Springer Nature. La ritrattazione è stata dettagliata in un avviso intitolato "Retraction Note: The effect of ChatGPT on students' learning performance, learning perception, and higher-order thinking — A meta-analysis", che ha evidenziato "discrepanze" nell'analisi e una mancanza di fiducia nei suoi risultati. L'articolo aveva ottenuto centinaia di citazioni ed era stato ampiamente condiviso sui social media. Ben Williamson, docente senior presso il Centre for Research in Digital Education dell'Università di Edimburgo, ha osservato che lo studio faceva "affermazioni molto accattivanti" ed era considerato "uno dei primi pezzi di prova solida e aurea" a sostegno dei benefici di ChatGPT per gli studenti. L'analisi ha esaminato 51 studi precedenti per valutare l'impatto di ChatGPT su varie metriche di apprendimento, calcolando le dimensioni dell'effetto tra gruppi sperimentali e di controllo. Questa ritrattazione sottolinea i problemi in corso riguardanti l'integrità della ricerca nel settore dell'educazione all'IA in rapida evoluzione.
Fatti principali
- Una meta-analisi sull'impatto di ChatGPT sull'apprendimento è stata ritirata da Springer Nature.
- La ritrattazione ha citato 'discrepanze' nell'analisi e mancanza di fiducia nelle conclusioni.
- L'articolo aveva centinaia di citazioni ed era ampiamente condiviso sui social media.
- Ben Williamson dell'Università di Edimburgo ha commentato le affermazioni accattivanti dello studio.
- Lo studio ha analizzato 51 ricerche precedenti su ChatGPT nell'istruzione.
- Ha calcolato le dimensioni dell'effetto tra gruppi sperimentali e di controllo.
- La ritrattazione è avvenuta quasi un anno dopo la pubblicazione.
- L'articolo è stato pubblicato su Humanities and Social Sciences Communications.
Entità
Istituzioni
- Springer Nature
- OpenAI
- Centre for Research in Digital Education
- Edinburgh Futures Institute
- University of Edinburgh
- Ars Technica
- Humanities and Social Sciences Communications
Luoghi
- Scotland