Il Controllo Conforme del Rischio Stratificato per Ruoli Migliora la Sicurezza delle Chiamate agli Strumenti LLM

Un recente articolo su arXiv (2607.24343) presenta una nuova tecnica di calibrazione chiamata controllo conforme del rischio per campo stratificato per ruoli, volta a migliorare la sicurezza delle chiamate agli strumenti effettuate da agenti basati su modelli linguistici. Gli autori sostengono che i metodi attuali di controllo conforme del rischio valutano le chiamate agli strumenti collettivamente, potenzialmente mascherando i fallimenti in aree rare ad alto rischio. La loro strategia prevede l'assegnazione di soglie e budget di rischio distinti a ciascun ruolo semantico dell'argomento, garantendo garanzie per campioni finiti per i ruoli adeguatamente campionati, mentre raggruppa quelli meno comuni. I risultati indicano che la certificazione aggregata amplifica il budget effettivo di un ruolo raro in relazione alla sua occorrenza, mentre la calibrazione stratificata per ruoli certifica ciascun ruolo in modo indipendente. Questo approccio affronta il problema dei contenuti non attendibili nei corpi delle email, escludendo impostazioni del destinatario, account, comandi o credenziali. Il metodo funziona come un livello di calibrazione, applicabile a qualsiasi rilevatore per campo. L'articolo è stato annunciato come tipo replace-cross ed è accessibile su arXiv.