Nuovo Benchmark Rivela che gli Agenti di Ricerca LLM si Affidano alla Conoscenza Interna

Uno studio di arXiv (2605.28721) introduce LiveBrowseComp, un benchmark di ricerca approfondita progettato per valutare se gli agenti di ricerca basati su LLM scoprono effettivamente nuove informazioni o si limitano a verificare ciò che già sanno. I ricercatori diagnosticano la Dipendenza dalla Conoscenza Intrinseca (IKD), mostrando che gli agenti rispondono fino al 44,5% delle domande di BrowseComp senza utilizzare strumenti, generano oltre la metà delle query di ricerca da ipotesi interne e ottengono risultati peggiori rispetto ai baselines a libro chiuso quando vengono rimossi i dati di supporto. Questi risultati indicano che i benchmark di ricerca statici potrebbero premiare la verifica basata sulla memoria piuttosto che la scoperta basata sull'evidenza. LiveBrowseComp mira a valutare gli agenti al di là della copertura intrinseca.