Brain-OF: Un Modello Fondamentale Unificato per fMRI, EEG e MEG
Brain-OF è un modello fondamentale cerebrale onnifunzionale pre-addestrato congiuntamente su dati fMRI, EEG e MEG. Gestisce input sia unimodali che multimodali all'interno di un quadro unificato. Il modello introduce un Campionatore di Segnale Neurale a Risoluzione Arbitraria per conciliare risoluzioni spazio-temporali eterogenee e proietta diversi segnali cerebrali in uno spazio semantico condiviso. La sua architettura integra l'attenzione DINT con un Mix Sparse di Esperti per gestire i cambiamenti semantici. Ciò supera la limitazione dei modelli esistenti, che sono ristretti a singole modalità funzionali, consentendo lo sfruttamento delle dinamiche spazio-temporali complementari e della scala collettiva dei dati attraverso le tecniche di neuroimmagine.
Fatti principali
- Brain-OF è un modello fondamentale cerebrale onnifunzionale.
- È pre-addestrato congiuntamente su fMRI, EEG e MEG.
- Gestisce input sia unimodali che multimodali.
- Introduce il Campionatore di Segnale Neurale a Risoluzione Arbitraria.
- Il campionatore proietta diversi segnali cerebrali in uno spazio semantico condiviso.
- L'architettura integra l'attenzione DINT con un Mix Sparse di Esperti.
- I modelli esistenti sono limitati a singole modalità funzionali.
- Brain-OF affronta l'eterogeneità semantica e le discrepanze di risoluzione.
Entità
—