NxN E-valuation: un nuovo metodo per la certificazione di ipotesi nei sistemi LLM

È stato proposto un nuovo algoritmo chiamato NxN E-valuation per la certificazione di ipotesi, progettato per verificare ipotesi senza costruire procedure di certificazione specifiche per il caso, a condizione che sia disponibile un set di dati sufficientemente ampio. Il metodo è particolarmente adatto ai sistemi di esplorazione basati su LLM, dove gli LLM eccellono nel proporre ipotesi ma soffrono di allucinazioni, impedendo l'uso diretto dei loro output. I rimedi esistenti, come la verifica circolare e il test su dati trattenuti, sono insufficienti; il test su dati trattenuti può far passare ipotesi false tramite correlazioni spurie. NxN E-valuation sfrutta il grande set di addestramento naturalmente esistente facendo sì che diversi campioni fungano da ipotesi nulle l'uno per l'altro. L'algoritmo si basa su e-values e predizione conformale, offrendo un approccio pratico e rigoroso. L'articolo è disponibile su arXiv con l'identificatore 2608.06621.