SkillRise: Framework RL Agentico per l'Apprendimento di Abilità su Più Compiti
I ricercatori hanno presentato SkillRise, un framework completo di apprendimento per rinforzo progettato per l'acquisizione di abilità su vari compiti. Questo sistema innovativo organizza istanze simili in sequenze di difficoltà crescente e utilizza una politica singola per alternare tra la risoluzione dei compiti e la creazione di un documento dinamico di abilità per i compiti successivi. Sfrutta un meccanismo di assegnazione del credito disaccoppiato che supervisiona la risoluzione dei compiti in base ai risultati attuali e la cura delle abilità utilizzando risultati futuri scontati. Le prove condotte su ALFWorld, WebShop e ScienceWorld dimostrano che SkillRise supera altri metodi, raggiungendo le migliori prestazioni Pass@1. Questo framework supera le sfide dell'apprendimento per rinforzo agentico convenzionale, che considera i compiti come episodi separati, e delle tecniche esistenti di apprendimento delle abilità che enfatizzano tentativi ripetuti di un compito o adottano pipeline multi-stadio.
Fatti principali
- SkillRise è un framework unificato di apprendimento per rinforzo per apprendere abilità tra compiti.
- Organizza istanze correlate in sequenze progressivamente più difficili.
- Utilizza una singola politica per alternare tra la risoluzione dei compiti e la cura di un documento di abilità in evoluzione.
- L'assegnazione del credito disaccoppiato supervisiona la risoluzione con il risultato del compito corrente e la cura con i risultati futuri scontati.
- Gli esperimenti sono stati condotti su ALFWorld, WebShop e ScienceWorld.
- SkillRise ha ottenuto le migliori prestazioni Pass@1 tra i metodi confrontati.
- L'RL agentico standard tratta i compiti come episodi indipendenti.
- Gli approcci esistenti di apprendimento delle abilità si concentrano su tentativi ripetuti di un compito o utilizzano pipeline multi-stadio.
Entità
—