Studio non rileva intelligenza collettiva in una società di due milioni di agenti
Una recente pubblicazione su arXiv presenta il Superminds Test, un approccio strutturato per valutare l'intelligenza collettiva in vaste comunità di agenti autonomi. I ricercatori hanno implementato questo test su MoltBook, che ospita più di due milioni di agenti, esaminando l'intelligenza a livello sociale in tre dimensioni: ragionamento congiunto, sintesi delle informazioni e interazioni di base. I risultati hanno indicato una significativa mancanza di intelligenza collettiva, poiché la società di agenti non ha superato i modelli individuali all'avanguardia in compiti di ragionamento complessi, ha raramente sintetizzato informazioni distribuite e ha spesso fallito anche in semplici compiti di coordinamento. Inoltre, un'analisi completa della piattaforma ha rivelato che i modelli di interazione non hanno favorito l'intelligenza emergente. Questo studio rappresenta la prima valutazione empirica se popolazioni di agenti basati su grandi modelli linguistici possano sviluppare spontaneamente intelligenza collettiva, concludendo che non lo fanno.
Fatti principali
- Lo studio introduce il Superminds Test per valutare l'intelligenza collettiva.
- Il test è stato applicato a MoltBook, una piattaforma con oltre due milioni di agenti.
- Sono stati esaminati tre livelli: ragionamento congiunto, sintesi delle informazioni e interazione di base.
- La società di agenti non è riuscita a superare i modelli individuali all'avanguardia nel ragionamento complesso.
- Le informazioni distribuite sono state raramente sintetizzate dagli agenti.
- Anche compiti di coordinamento banali sono stati spesso falliti.
- L'analisi a livello di piattaforma non ha mostrato intelligenza collettiva emergente.
- Lo studio è la prima valutazione empirica dell'intelligenza collettiva in società di agenti LLM su larga scala.
Entità
Istituzioni
- arXiv