I LLM mostrano strutture cognitive aliene, secondo uno studio
Risultati recenti pubblicati su arXiv mettono in discussione la convinzione che l'IA e gli esseri umani possiedano strutture cognitive simili. I ricercatori hanno esaminato le risposte di esseri umani e sei grandi modelli linguistici (LLM) in valutazioni di ragionamento quantitativo e chimica attraverso l'analisi fattoriale esplorativa. Esperti del settore hanno valutato i grafici fattoriali risultanti senza conoscere in anticipo la loro origine. Sono stati in grado di interpretare la maggior parte dei fattori derivanti dalle risposte umane, ma hanno faticato ad attribuire un significato a qualsiasi fattore derivato dai LLM nel ragionamento quantitativo, e solo alla metà in chimica. Questi risultati implicano che i LLM potrebbero dipendere da strutture latenti sconosciute che non corrispondono a concetti comprensibili dagli esseri umani.
Fatti principali
- Studio condotto su preprint arXiv 2608.17810
- Indaga i fattori latenti nelle prestazioni dei LLM
- Utilizza le risposte di esseri umani e sei LLM
- Le valutazioni coprono ragionamento quantitativo e chimica
- Metodologia: analisi fattoriale esplorativa (EFA) separatamente per esseri umani e LLM
- Esperti del settore hanno valutato alla cieca i grafici fattoriali
- Gli esperti hanno interpretato la maggior parte dei fattori derivanti dagli esseri umani
- Gli esperti non hanno potuto interpretare alcun fattore dei LLM nel ragionamento quantitativo, e solo la metà in chimica
Entità
—