FaceParts: Editing facciale 3D non supervisionato tramite Gaussian Splatting

FaceParts è un framework progettato per la segmentazione e l'editing non supervisionato di avatar basati su Gaussian Splatting, consentendo modifiche facciali accurate e lo scambio di caratteristiche tra avatar senza la necessità di regolazioni manuali. A differenza delle tecniche tradizionali 2D o basate su mesh, questo metodo opera direttamente nel dominio gaussiano, scomponendo gli avatar in componenti semanticamente significative come barbe, sopracciglia, occhi e baffi. Impiega una combinazione di disentanglement delle caratteristiche, clustering basato sulla densità e trasferimento di parti ancorato a FLAME. I test sul dataset NeRSemble, che include 11 soggetti, mostrano un efficace isolamento delle caratteristiche, con segmenti trasferiti che si adattano con successo a varie pose ed espressioni. Questa tecnica ha potenziali applicazioni in settori come l'intrattenimento, gli avatar digitali e la realtà virtuale.