IDP AutoOpt: un agente LLM ottimizza le pipeline di elaborazione documentale
IDP AutoOpt è un agente autonomo che utilizza la tecnologia LLM per identificare configurazioni ottimali per pipeline di elaborazione intelligente dei documenti (IDP). Regolando simultaneamente prompt, modelli, impostazioni OCR e schemi, riduce i tempi di configurazione da diverse settimane a meno di due ore. L'agente opera in un ciclo chiuso: valuta una configurazione utilizzando un piccolo dataset etichettato, identifica errori a livello di campo, crea modifiche specifiche e rivaluta, il tutto con l'assistenza di competenze di dominio scritte da umani. In vari settori come sanità, intelligence di marketing e servizi finanziari, IDP AutoOpt raggiunge o supera l'accuratezza di esperti umani a costi comparabili o ridotti. Ad esempio, ha registrato un'accuratezza del 90,2% su un benchmark di estrazione, rispetto all'81,6% a un costo per pagina 4,6 volte inferiore. Questo sistema affronta efficacemente i sostanziali costi di ottimizzazione, che possono variare da 20 a oltre 80 ore per tipo di documento, una sfida che cresce man mano che le aziende introducono più classi di documenti.
Fatti principali
- IDP AutoOpt è un agente LLM autonomo per l'ottimizzazione delle configurazioni delle pipeline IDP.
- Regola congiuntamente prompt, modelli, impostazioni OCR e schemi.
- Tempo di configurazione ridotto da settimane a meno di due ore.
- L'agente esegue un ciclo chiuso: valutazione, diagnosi, modifica, rivalutazione.
- Guidato da competenze di dominio scritte da umani che codificano l'esperienza produttiva.
- Testato su compiti di estrazione, classificazione e suddivisione dei pacchetti.
- Applicato in contesti sanitari, di intelligence di marketing e servizi finanziari.
- Su un benchmark di estrazione: 90,2% di accuratezza contro 81,6% a un costo per pagina 4,6 volte inferiore.
Entità
Istituzioni
- arXiv