Controllo selettivo del rischio per l'estrazione di documenti: tre modalità di fallimento e una scala di validità

Un articolo arXiv (2608.14639) esamina l'efficacia della gestione selettiva del rischio per campo nei sistemi di estrazione di documenti, dove un campo è considerato accettabile solo se il tasso di errore tra i campi accettati è mantenuto a un livello alfa predeterminato. Analizzando 13.859 campi da 800 ricevute CORD elaborate da claude-sonnet-5 (con una precisione del 49,0%), la ricerca identifica tre modalità di fallimento che possono portare a violazioni involontarie del contratto di rischio. Il clustering dei documenti causa un effetto di design di 1,84-2,45, aumentando la varianza. Il leakage di score-refit comporta una copertura di 0,416 a un rischio di 0,127, violando alfa=0,10 nel 95% dei casi. Inoltre, una patologia di massa di parità riduce la copertura da 0,030 a 0,001. Gli autori suggeriscono una scala di validità per classificare le soluzioni in base alla loro affidabilità. Un protocollo di split fit/val è dimostrato per ripristinare il controllo selettivo del rischio atteso per una fusione appresa, raggiungendo una copertura di 0,318 a un rischio di 0,096 con un alfa nominale di 0,10, mentre una variante di produzione raggiunge una copertura di 0,326. Tuttavia, questo punto medio ha visto il rischio superare alfa nel 47,5% dei risplit, evidenziando che la garanzia è incoerente. L'articolo offre una diagnosi completa e un quadro per aiutare i professionisti a selezionare strategie di controllo del rischio adeguate in base alla loro tolleranza alle violazioni.