Sintesi multimodale di MRI e dati tabellari tramite modello di diffusione

Un team di ricercatori ha introdotto un modello di diffusione latente multimodale che integra la risonanza magnetica volumetrica (MRI) insieme a dati clinici tabellari in uno spazio latente unificato attraverso meccanismi di attenzione incrociata. Questo modello impiega un autoencoder variazionale per fondere i dati MRI e tabellari prima della sintesi basata sulla diffusione, con decodificatori distinti per ciascun tipo di dato. Il modello è stato testato utilizzando informazioni della Coorte Nazionale Tedesca (NAKO Gesundheitsstudie), che include oltre 10.000 partecipanti. I volumi MRI risultanti hanno dimostrato accuratezza anatomica e composizione corporea allineata con i dati tabellari sintetizzati, comprendenti attributi come età, sesso, misure corporee ed etnia. La distanza di Fréchet e le metriche di precisione e richiamo sono state utilizzate per la valutazione quantitativa.