HoloMotion-1: Modello Fondamentale per il Movimento Umanoide per il Tracciamento Zero-Shot di Tutto il Corpo
Il documento tecnico presenta HoloMotion-1, un modello fondamentale per il movimento umanoide che consente il tracciamento zero-shot dei movimenti di tutto il corpo. Il suo principale progresso risiede nel migliorare l'addestramento delle politiche di controllo attraverso un vasto dataset di movimento ibrido. La diversità dominante del movimento deriva da azioni ricostruite da video catturati in scenari reali, mentre dati di motion capture curati e dati di movimento proprietari garantiscono una supervisione superiore e un'applicazione pratica. Questo approccio supera l'addestramento tradizionale basato solo su MoCap, consentendo alla politica di apprendere da una gamma più ampia di comportamenti, ambienti di cattura e stili di movimento. Tuttavia, sorgono sfide dovute al rumore di ricostruzione, alla mancata corrispondenza tra domini sorgente, alla qualità del movimento non uniforme e alla modellazione temporale in presenza di variazioni comportamentali significative. Per affrontare questi problemi, HoloMotion-1 impiega un sistema di modellazione temporale robusto e un'architettura sparsa.
Fatti principali
- HoloMotion-1 è un modello fondamentale per il movimento umanoide per il tracciamento zero-shot dei movimenti di tutto il corpo.
- Utilizza un ampio corpus di movimento ibrido per l'addestramento.
- I movimenti ricostruiti da video in-the-wild forniscono la diversità dominante del movimento.
- Dati di motion capture curati e dati di movimento interni forniscono una supervisione a più alta fedeltà.
- Il modello va oltre l'addestramento convenzionale basato solo su MoCap.
- Le sfide includono rumore di ricostruzione, mancata corrispondenza tra domini sorgente, qualità del movimento non uniforme e modellazione temporale.
- HoloMotion-1 integra una modellazione temporale ad alta capacità e un'architettura sparsa.
- Il rapporto è pubblicato su arXiv con ID 2605.15336.
Entità
Istituzioni
- arXiv