CHARM: Modello Fondazionale Multimodale per Grafi con Trasferimento Zero-Shot
Un articolo di ricerca introduce CHARM, un modello fondazionale multimodale per grafi progettato per il trasferimento zero-shot tra domini e compiti grafici. I grafi del mondo reale spesso associano nodi a testo, immagini e altre modalità, ma i modelli fondazionali per grafi esistenti richiedono adattamento a valle o affrontano solo grafi unimodali. CHARM affronta due sfide chiave: generalizzare la conoscenza da singole modalità catturando relazioni cross-modali, ed evitare l'intreccio di rappresentazioni dei nodi specifiche del dominio senza fine-tuning sul dominio target. Il modello utilizza la modellazione gerarchica del contesto per consentire il trasferimento zero-shot su grafi multimodali, un contesto ancora poco esplorato. L'articolo è pubblicato su arXiv con ID 2607.26023.
Fatti principali
- CHARM è un modello fondazionale multimodale per grafi.
- Si concentra sul trasferimento zero-shot tra domini e compiti grafici.
- I grafi del mondo reale associano nodi a molteplici modalità.
- I modelli fondazionali per grafi basati su GNN richiedono adattamento a valle.
- I metodi grafici basati su LLM affrontano principalmente grafi unimodali o compiti a dominio singolo.
- CHARM affronta due sfide chiave: generalizzazione cross-modale e intreccio specifico del dominio.
- Il modello utilizza la modellazione gerarchica del contesto.
- L'articolo è disponibile su arXiv (2607.26023).
Entità
Istituzioni
- arXiv