ARC: Configurazione dinamica degli agenti per sistemi LLM
Un nuovo approccio gerarchico chiamato ARC (Agentic Resource & Configuration learner) è stato sviluppato dai ricercatori per migliorare i sistemi basati su LLM, selezionando configurazioni di agenti adatte a query specifiche. Questa innovazione supera i limiti dei template statici e delle euristiche regolate manualmente che utilizzano la stessa configurazione indipendentemente dalla complessità della query. ARC tratta la configurazione dell'agente come un processo decisionale semi-markoviano (SMDP), con ogni configurazione che funge da opzione temporalmente estesa. Rispetto agli LLM potenziati con strumenti a budget corrispondente, ARC mostra miglioramenti significativi nei benchmark di ragionamento, uso di strumenti e agentività, aumentando l'accuratezza media del ragionamento del 31,3%, incrementando l'accuratezza nell'uso degli strumenti del 13,95% e raggiungendo un tasso di successo doppio in τ-Bench (Airline) Pass^1. Il metodo ottimizza flussi di lavoro, strumenti, budget di token e prompt da un vasto spazio di progettazione combinatoria.
Fatti principali
- ARC è un leggero policy gerarchico per la configurazione dinamica degli agenti.
- La configurazione dell'agente è formulata come un processo decisionale semi-markoviano (SMDP).
- ARC migliora l'accuratezza del ragionamento del 31,3% in media.
- L'accuratezza nell'uso degli strumenti aumenta del 13,95% con ARC.
- Il tasso di successo in τ-Bench (Airline) Pass^1 è raddoppiato.
- I metodi attuali utilizzano template fissi o euristiche regolate manualmente.
- La configurazione coinvolge flussi di lavoro, strumenti, budget di token e prompt.
- L'approccio riduce il comportamento fragile e il calcolo sprecato.
Entità
—