FutureSim: Agenti AI testati sulla previsione di eventi reali

I ricercatori hanno sviluppato FutureSim, un framework di simulazione che riproduce cronologicamente eventi reali per valutare come gli agenti AI si adattano a nuove informazioni. Il sistema presenta agli agenti articoli di notizie e domande che si risolvono in un periodo di tre mesi, da gennaio a marzo 2026, testando la loro capacità di prevedere eventi mondiali oltre il loro cutoff di conoscenza. Nelle valutazioni, l'agente con le migliori prestazioni ha raggiunto solo il 25% di accuratezza, e molti agenti hanno performato peggio che non fare alcuna previsione, misurato dal Brier skill score. Lo studio evidenzia una netta separazione nelle capacità adattive tra gli agenti AI di frontiera e dimostra l'utilità di FutureSim per studiare la ricerca emergente sull'AI adattiva. Il lavoro è dettagliato in un articolo su arXiv (ID: 2605.15188).