GaMi: Identificazione Multimodale dei Materiali tramite Sensori mmWave e Acustici

I ricercatori hanno sviluppato GaMi, un sistema multimodale di identificazione dei materiali che combina sensori mmWave e acustici per superare le variazioni geometriche e le ambiguità di singola modalità. Il sistema utilizza un framework di disentanglement sottrattivo cross-modale intra-campione, sfruttando la coerenza geometrica condivisa tra sensori bimodali co-localizzati per isolare le caratteristiche intrinseche del materiale. L'apprendimento contrastivo inter-campione corregge le interferenze residue dovute al disallineamento cross-modale, mentre una strategia di adattamento basata su accoppiamenti consente la generalizzazione few-shot tra dispositivi. Il lavoro, pubblicato su arXiv (2605.30818), si rivolge all'identificazione dei materiali senza contatto per l'intelligenza incarnata, operando in modo robusto in condizioni geometriche non vincolate come orientamento, forma e distanza variabili.