Wnuan: Una pipeline in tre fasi per il QA aziendale con conoscenza proprietaria

Uno studio recente su arXiv ha introdotto Wnuan, un approccio innovativo in tre fasi volto a migliorare il question answering all'interno della conoscenza aziendale proprietaria, mantenendo al contempo le capacità generali. Il framework genera indicazioni specifiche da documenti esistenti, impiega il fine-tuning supervisionato con replay di dati generali e integra l'apprendimento per rinforzo per affrontare gli errori residui. In un test di benchmark che ha coinvolto 707 domande, il modello primario da 32B ha migliorato il tasso di risposta accettabile dal 52,76% all'80,06% dopo il fine-tuning, e al 91,51% con l'apprendimento per rinforzo. Inoltre, un protocollo di 100 aggiornamenti ha indicato che il campionamento degli errori residui ha superato sia il campionamento completo che quello casuale di 3,11 e 2,97 punti, rispettivamente.