RecGen: Ricostruzione di Scene 3D da Osservazioni Spars

I ricercatori hanno creato un framework innovativo chiamato RecGen, progettato per stimare le forme e le pose di oggetti e loro parti, anche quando sono parzialmente nascosti, utilizzando una o più immagini RGB-D. Questo metodo combina la generazione sintetica di scene con modelli 3D forti per gestire diversi tipi di oggetti e ambienti reali. RecGen ha raggiunto un nuovo massimo nelle prestazioni su dataset impegnativi con forti occlusioni, gestendo efficacemente casi difficili come oggetti simmetrici e texture complesse. Impressionantemente, richiede quasi l'80% in meno di mesh di addestramento rispetto al precedente leader, SAM3D, superandolo del 30,1% in accuratezza geometrica, del 9,1% in qualità della texture e del 33,9% in altre metriche, il che è fondamentale per far progredire la simulazione robotica.