VerbatimRAG: QA senza allucinazioni per articoli di ricerca

I ricercatori hanno sviluppato VerbatimRAG, un sistema di question answering estrattivo che elimina le allucinazioni nell'assistenza alla ricerca basata sull'IA, mappando le domande degli utenti direttamente a porzioni di testo verbatim nei documenti recuperati. Il sistema è applicato all'ACL Anthology e utilizza un nuovo dataset di ground truth creato tramite la metodologia ScIRGen, con annotazione umana da parte di ricercatori di NLP. Un modello ModernBERT da 150 milioni di parametri viene addestrato e valutato su questo benchmark. L'approccio affronta la tendenza degli LLM a produrre output fattualmente inaccurati, fornendo un metodo affidabile per raccogliere informazioni di alta qualità da fonti attendibili.