VecSet-Edit: Editing di Mesh AI da Singola Immagine
VecSet-Edit, un innovativo pipeline AI, consente la modifica diretta di mesh 3D derivate da una singola immagine, superando le limitazioni delle precedenti tecniche basate su voxel. Questo sistema si basa sul VecSet Large Reconstruction Model (LRM), creato da un team di ricercatori. Il loro metodo esamina le caratteristiche spaziali dei token VecSet, dimostrando che specifici sottoinsiemi di token controllano diverse aree geometriche. Presenta Mask-guided Token Seeding e Attention-aligned Token Gating per individuare le regioni target basandosi esclusivamente su input 2D. Questa ricerca è descritta in un preprint disponibile su arXiv.
Fatti principali
- VecSet-Edit è il primo pipeline a utilizzare VecSet LRM per l'editing di mesh.
- Supera le limitazioni delle rappresentazioni basate su voxel come VoxHammer.
- Il metodo utilizza Mask-guided Token Seeding e Attention-aligned Token Gating.
- Richiede solo una singola immagine e condizioni 2D per l'editing.
- La ricerca è stata pubblicata su arXiv con ID 2602.04349.
- I sottoinsiemi di token in VecSet governano regioni geometriche distinte.
- L'approccio evita le maschere 3D laboriose.
- Punta a fornire un controllo flessibile sugli asset 3D.
Entità
Istituzioni
- arXiv