SkillC: Assegnazione Contrastiva del Credito per l'Internalizzazione delle Competenze negli Agenti LLM

I ricercatori hanno sviluppato SkillC, un nuovo framework progettato per aiutare gli agenti LLM ad apprendere competenze in modo autonomo utilizzando un metodo chiamato assegnazione contrastiva del credito. A differenza di altri approcci di apprendimento per rinforzo che utilizzano competenze esterne o le scartano, la maggior parte dei metodi attuali si concentra solo sull'utilità di una competenza senza aggiornare le politiche. SkillC introduce l'Assegnazione Contrastiva del Credito per le Competenze (CSCA), che trasforma questa utilità in un segnale di apprendimento. Produce due tipi di rollout – uno con competenze e uno senza – durante lo stesso aggiornamento della politica, utilizzando il contrasto a livello di compito per migliorare l'ottimizzazione. Questo approccio mira a potenziare l'apprendimento per rinforzo a lungo termine, consentendo agli agenti di apprendere competenze senza fare affidamento su segnali esterni durante i test.