Routing Adattivo Dinamico per il Recupero Multimodale Continuo
Un recente studio presenta il Dynamic Adapter Routing (DAR), una tecnica progettata per il recupero multimodale continuo in modelli visione-linguaggio. I ricercatori sostengono che i metodi attuali, tipicamente basati sull'apprendimento incrementale per classi (CIL), non funzionano bene in scenari pratici. Introducono un innovativo quadro di valutazione per il recupero multimodale continuo (CMR) che comprende vari domini visivi. Utilizzando il routing basato su prototipi per selezionare gli adapter e fondere i modelli, DAR dimostra prestazioni migliori rispetto ai benchmark precedenti. Questa ricerca è accessibile su arXiv con l'identificatore 2605.31229.
Fatti principali
- Il Dynamic Adapter Routing (DAR) è proposto per il recupero multimodale continuo.
- I metodi CIL esistenti falliscono nello scenario più impegnativo proposto.
- Viene introdotto un nuovo quadro di valutazione per il CMR.
- DAR utilizza routing basato su prototipi e fusione di modelli.
- L'articolo è su arXiv con ID 2605.31229.
- L'approccio è mirato a modelli visione-linguaggio.
- Il recupero continuo rimane poco esplorato.
- DAR raggiunge prestazioni superiori rispetto ai baselines.
Entità
Istituzioni
- arXiv