M2R2: Un estrattore di caratteristiche multimodale per la segmentazione temporale di azioni robotiche

I ricercatori propongono M2R2, un estrattore di caratteristiche multimodale per la segmentazione temporale di azioni (TAS) in robotica. Il modello integra dati provenienti da sensori propriocettivi ed esterocettivi, affrontando le limitazioni degli approcci esistenti che fondono le caratteristiche all'interno dei modelli, ostacolando il riutilizzo, e degli estrattori basati solo sulla visione, che falliscono in caso di scarsa visibilità degli oggetti. Una nuova strategia di addestramento consente il riutilizzo delle caratteristiche apprese in diversi modelli. Il lavoro si colloca all'intersezione tra robotica e visione artificiale, dove la TAS è fondamentale per il rilevamento dei confini delle abilità. L'articolo è disponibile su arXiv.