FeasiGen: Creare Automaticamente Compiti Irrealizzabili per Agenti che Usano Strumenti
Uno studio recente pubblicato su arXiv (2605.28532) presenta FeasiGen, un sistema automatizzato volto a creare compiti irrealizzabili per agenti che utilizzano strumenti. Questa iniziativa mira a migliorare l'efficienza consentendo agli agenti di riconoscere quando un compito non può essere portato a termine con gli strumenti a loro disposizione, riducendo così spese computazionali non necessarie. FeasiGen raccoglie tracce di chiamate agli strumenti da esecuzioni riuscite in vari sistemi agenti, individua gli strumenti essenziali frequentemente utilizzati in diverse strategie e nasconde questi strumenti per trasformare compiti risolvibili in irrealizzabili. La validazione umana ha dimostrato un tasso di accuratezza superiore al 94% per le annotazioni di irrealizzabilità. Questo metodo affronta il problema reale degli agenti che sprecano risorse in compiti irraggiungibili in ambienti con strumenti limitati.
Fatti principali
- FeasiGen è un pipeline automatico per costruire compiti agenti irrealizzabili.
- Identifica gli strumenti critici necessari per il completamento del compito.
- Estrae tracce di chiamate agli strumenti da esecuzioni riuscite in più sistemi agenti.
- Maschera gli strumenti critici per trasformare compiti risolvibili in irrealizzabili.
- La verifica umana conferma oltre il 94% di accuratezza per le annotazioni di irrealizzabilità.
- L'approccio mira a ridurre il costo computazionale tramite la rilevazione precoce di compiti irrealizzabili.
- La ricerca è pubblicata su arXiv con ID 2605.28532.
- L'articolo si concentra su agenti che usano strumenti in ambienti con strumenti limitati.
Entità
Istituzioni
- arXiv