LLM Agents Factory: Costruzione di Agenti Dominio-Specifici Basata su Recupero
Uno studio recente presenta LLM Agents Factory, un framework progettato per la creazione su richiesta di agenti LLM dominio-specifici attraverso metodi di recupero. Questo sistema si basa su un insieme di oltre 20.000 profili di agenti predefiniti e offre due modalità operative: recupero tramite ricerca semantica e distillazione in un modello semplificato per la generazione diretta di output. I risultati dei test condotti su MMLU, BIG-bench e BIG-bench Hard indicano che la costruzione di agenti tramite metodi di recupero supera i benchmark non-agente in termini di accuratezza, raggiungendo la qualità di generazione di AutoGen utilizzando un backbone da 120B a un costo di inferenza ridotto. La ricerca è disponibile su arXiv con identificatore 2608.09934.
Fatti principali
- LLM Agents Factory è un framework basato su recupero per la costruzione di agenti LLM dominio-specifici.
- Utilizza una base di oltre 20.000 profili di agenti predefiniti.
- Il framework supporta due modalità: recupero del profilo dell'agente tramite ricerca semantica e distillazione in un modello compatto.
- Gli esperimenti sono stati condotti su MMLU, BIG-bench e BIG-bench Hard in uno scenario a agente singolo.
- La costruzione di agenti basata su recupero supera i baseline non-agente in accuratezza.
- Raggiunge la qualità di generazione di AutoGen con un backbone da 120B a un costo di inferenza sostanzialmente inferiore.
- L'articolo è pubblicato su arXiv con identificatore 2608.09934.
- Il framework affronta il costo computazionale e l'instabilità nella progettazione di agenti al volo.
Entità
Istituzioni
- arXiv