Consolidator: Memoria Instradata Persistente Attraverso i Confini di Contesto
Un nuovo articolo su arXiv (2608.11701) introduce Consolidator, un meccanismo per le Phasor Memory Networks (PMNet) che consente una memoria persistente attraverso i confini di contesto. L'approccio trasforma la memoria a breve termine instradata (STM) in memoria a lungo termine (LTM) senza riprodurre i token sorgente, cancellando la cache KV e la STM dopo ogni consolidamento. La LTM mantenuta viene inserita in un router gerarchico, condizionando l'accesso successivo alla memoria. Valutato su un compito di mappatura modulo-10 a due segmenti, il metodo consente a una query esclusa di recuperare le mappature aggiornate dopo un secondo consolidamento e reset. Il backbone e l'interfaccia di memoria rimangono congelati, con solo 12,35K parametri addestrabili. Questo lavoro affronta la distinzione tra persistenza e influenza nella ritenzione della memoria, una sfida chiave nella gestione del contesto nell'IA.
Fatti principali
- L'articolo arXiv:2608.11701 introduce Consolidator per le Phasor Memory Networks (PMNet).
- Consolidator trasforma la memoria a breve termine instradata (STM) in memoria a lungo termine (LTM) senza riprodurre i token sorgente.
- Dopo ogni consolidamento, la cache KV e la STM vengono cancellate.
- La LTM mantenuta viene inserita nel router gerarchico, condizionando l'accesso successivo alla memoria.
- Valutato su un compito di mappatura modulo-10 a due segmenti.
- Il secondo segmento aggiorna la mappatura allo stesso indirizzo di memoria.
- Dopo un secondo consolidamento e reset, una query esclusa deve recuperare la mappatura aggiornata dalla LTM.
- Il backbone e l'interfaccia di memoria sono congelati, lasciando solo 12,35K parametri addestrabili.
Entità
Istituzioni
- arXiv