Il reindirizzamento consapevole della fonte migliora l'affidabilità del recupero RAG

Uno studio recente condotto dalla Milwaukee School of Engineering presenta un miglioramento diretto ai framework di Retrieval-Augmented Generation (RAG) integrando la credibilità della fonte nella classificazione dei documenti. I sistemi RAG tradizionali valutano i documenti recuperati basandosi esclusivamente sulla similarità semantica, trascurando le loro origini. Il nuovo approccio assegna un prior di affidabilità, lambda(s), a ciascun documento in base al tipo di fonte e regola i punteggi di similarità utilizzando la formula score(q, d) = sim(q, d) * lambda(s). Valutato su un corpus del settore sanitario di 120 documenti, questo riordinamento consapevole della fonte ha aumentato Precision@5 da 0,48 a 0,72 e ha minimizzato il recupero di documenti avversari in scenari in cui le fonti a bassa credibilità possono essere identificate tramite metadati. Gli esperimenti hanno utilizzato Rosie, il cluster di calcolo ad alte prestazioni della Milwaukee School of Engineering.