Marionette: Un Nuovo Modello Mondiale per Giochi Interattivi con Predizione Esplicita dello Stato 3D
I ricercatori hanno introdotto Marionette, un nuovo modello mondiale per giochi interattivi che predice esplicitamente uno stato mondiale 3D a 276 dimensioni, includendo scheletri articolati multi-entità, traiettorie metriche della radice e rotazioni. A differenza dei modelli autoregressivi tradizionali che generano direttamente osservazioni visive, Marionette delega il calcolo geometrico esatto a un renderer fisso a zero parametri, lasciando al modello neurale la sintesi dell'aspetto. Questo approccio mira a migliorare la coerenza a lungo termine e la controllabilità negli ambienti di gioco. Il modello è dettagliato in un articolo su arXiv (2608.14530), annunciato come sottomissione cross-type. Il lavoro affronta la fragilità dell'accumulo di proprietà latenti del mondo nel tempo separando la predizione dello stato dal rendering, offrendo potenzialmente un framework più robusto per simulazioni interattive.
Fatti principali
- Marionette è un modello mondiale per giochi interattivi con personaggi articolati.
- Predice uno stato mondiale 3D esplicito a 276 dimensioni.
- Lo stato mondiale include scheletri articolati multi-entità, traiettorie metriche della radice e rotazioni.
- Un ponte grafico a zero parametri converte gli stati predetti in video di controllo della posa.
- Il modello utilizza un modello dinamico autoregressivo a due stadi.
- Delega il calcolo geometrico a un renderer fisso, lasciando la sintesi dell'aspetto al modello neurale.
- L'articolo è disponibile su arXiv con ID 2608.14530.
- Il tipo di annuncio è cross.
Entità
Istituzioni
- arXiv