L'apprendimento guidato da razionali migliora il riconoscimento delle emozioni multimodali
È stato introdotto un nuovo approccio noto come apprendimento guidato da razionali (RGL) per migliorare il riconoscimento delle emozioni multimodali nella conversazione (MERC). Questo metodo si differenzia dalle tecniche convenzionali che collegano direttamente i segnali multimodali alle etichette emotive, integrando il ragionamento causale radicato nella teoria del doppio processo. RGL scompone il ragionamento emotivo in tre componenti: Intuitivo (Sistema 1), Contestuale (Sistema 2) e Integrativo. Un grande modello linguistico multimodale offline (MLLM) crea razionali strutturati, che vengono poi memorizzati come memorie per facilitare l'addestramento del modello, garantendo che le rappresentazioni interne rispecchino il ragionamento umano. Durante l'inferenza, il modello finale funziona senza il sovraccarico del MLLM. L'articolo di ricerca è disponibile su arXiv con ID 2608.10448.
Fatti principali
- Il framework è chiamato apprendimento guidato da razionali (RGL).
- È progettato per il riconoscimento delle emozioni multimodali nella conversazione (MERC).
- RGL si basa sulla teoria del doppio processo.
- Il ragionamento emotivo è scomposto in aspetti Intuitivo, Contestuale e Integrativo.
- Un MLLM offline genera razionali strutturati.
- I razionali sono codificati come memorie per guidare l'addestramento del modello.
- Il modello finale non richiede il sovraccarico del MLLM durante l'inferenza.
- L'articolo è disponibile su arXiv con ID 2608.10448.
Entità
Istituzioni
- arXiv