Il feedback degli LLM aumenta del 12,55% i tassi di revisione dei manoscritti in un esperimento globale
Uno studio randomizzato su larga scala ha valutato l'efficacia dei modelli linguistici di grandi dimensioni (LLM) nel fornire feedback scientifico. La ricerca ha coinvolto oltre 31.000 preprint di arXiv provenienti da 150 discipline e ha incluso la partecipazione di più di 45.000 ricercatori in 133 regioni del mondo. Gli autori che hanno ricevuto feedback personalizzati generati da LLM hanno registrato un aumento relativo del 12,55% nella probabilità di revisionare i propri manoscritti rispetto al gruppo di controllo. Inoltre, l'uso del feedback dell'IA ha portato a un maggiore utilizzo di strumenti LLM nelle pubblicazioni future degli autori, indicando potenziali cambiamenti a lungo termine nelle metodologie scientifiche. L'esperimento globale è stato pubblicato su arXiv.
Fatti principali
- Esperimento randomizzato su larga scala a livello globale
- Oltre 31.000 preprint di arXiv utilizzati
- 150 discipline coperte
- Più di 45.000 ricercatori da 133 regioni geografiche
- Aumento relativo del 12,55% nel tasso di revisione
- Aumento dell'uso successivo di strumenti LLM
- Studio pubblicato su arXiv
- Feedback personalizzato generato da LLM
Entità
Istituzioni
- arXiv