GLIDE Library unifica l'inferenza basata su previsioni per una valutazione affidabile dell'IA generativa

GLIDE, una libreria Python open-source di recente lancio, integra tecniche avanzate di inferenza basata su previsioni (PPI) per valutare sistemi di IA generativa e agentici. Combinando costose annotazioni umane con proxy distorti LLM-as-judge, PPI genera stime corrette accompagnate da intervalli di confidenza affidabili. Questa libreria comprende vari stimatori, come PPI++, PPI Stratificato, Predict-Then-Debias e Inferenza Statistica Attiva, oltre a campionatori come uniforme, stratificato, attivo e costo-ottimale, il tutto attraverso un'API in stile scipy specializzata per la stima della media. Inoltre, GLIDE include una suite di validazione Monte Carlo riproducibile, un albero decisionale basato su dati empirici per la selezione del metodo e un caso di studio sulla valutazione agentica che rivela significativi risparmi di annotazione mantenendo la precisione. La libreria è accessibile su GitHub.