Nuovo Quadro Affronta i Fallimenti di Impegno nei Sistemi AI Personalizzati
Un nuovo articolo introduce l'Attivazione delle Prove Contrattualmente Limitate (CBEA) con la Convalida Lessicografica degli Impegni (LCV) per affrontare i fallimenti nei sistemi linguistici personalizzati. Il quadro affronta problemi che si verificano dopo il richiamo, quando i sistemi si impegnano su indizi rumorosi, trascurano prove rare o ignorano l'infattibilità. CBEA attiva insiemi di prove limitati utilizzando copertura tipizzata, testimoni di coda e debito di conseguenza, mentre LCV convalida gli impegni prima di generare testo. Su 360 casi di test e tre backend, CBEA+LCV ha raggiunto zero fallimenti nell'ambito del validatore con una disponibilità di 0.49–0.60, rispetto a 0.003–0.092 per le baseline. Un oracolo ombra ha mostrato che CBEA+LCV richiama 0.012 di fatti non compilati contro 0 per i sistemi grezzi. L'articolo è disponibile su arXiv.
Fatti principali
- L'articolo introduce l'Attivazione delle Prove Contrattualmente Limitate (CBEA) e la Convalida Lessicografica degli Impegni (LCV)
- Affronta i fallimenti dopo il richiamo nei sistemi linguistici personalizzati
- CBEA utilizza copertura tipizzata, testimoni di coda e debito di conseguenza
- LCV convalida gli impegni strutturati prima della generazione di prosa
- Testato su 360 fixture e tre backend di generazione
- CBEA+LCV raggiunge zero fallimenti nell'ambito del validatore con una disponibilità di 0.49–0.60
- Le baseline grezze e a contesto lungo con gate LCV raggiungono zero solo a 0.003–0.092
- L'oracolo ombra mostra che CBEA+LCV richiama 0.012 di fatti visibili non compilati
Entità
Istituzioni
- arXiv