Derivation Prompting: un metodo basato sulla logica migliora l'accuratezza del RAG
Derivation Prompting, una tecnica innovativa, mira a ridurre al minimo le allucinazioni e i ragionamenti errati nei modelli linguistici di grandi dimensioni (LLM) durante i compiti di risposta a domande che richiedono conoscenze. Ispirandosi alle derivazioni logiche, questo metodo crea un albero di derivazione chiaro applicando sistematicamente regole stabilite a ipotesi iniziali. È progettato per la fase di generazione del framework Retrieval-Augmented Generation (RAG). In un caso di studio specifico, Derivation Prompting ha mostrato una notevole diminuzione delle risposte inaccettabili rispetto ai metodi RAG convenzionali e a finestra di contesto lunga. Questa ricerca è stata resa disponibile su arXiv nella sezione di informatica, specificamente in Computation and Language.
Fatti principali
- Derivation Prompting è una nuova tecnica di prompting per la fase di generazione del RAG.
- Si ispira alle derivazioni logiche, traendo conclusioni da ipotesi iniziali tramite l'applicazione sistematica di regole.
- Il metodo costruisce un albero di derivazione interpretabile per aggiungere controllo sulla generazione.
- Applicato in un caso di studio, ha ridotto significativamente le risposte inaccettabili.
- Confrontato con i metodi RAG tradizionali e a finestra di contesto lunga.
- Affronta allucinazioni e ragionamenti errati negli LLM per compiti che richiedono conoscenze.
- Pubblicato su arXiv in Computer Science > Computation and Language.
- L'articolo è stato inviato il 14 maggio 2025.
Entità
Istituzioni
- arXiv