Montaggio Video Senza Ottimizzazione tramite Inizializzazione Strutturale del Rumore
Viene proposto un nuovo framework di montaggio video basato su istruzioni e senza necessità di ottimizzazione, che introduce una Strategia di Inizializzazione Strutturale del Rumore (SNIS) e un Meccanismo di Guida del Rumore (NGM). SNIS assegna livelli di rumore più elevati alle regioni modificate per il cambiamento di contenuto e livelli inferiori alle aree non modificate per la coerenza. NGM integra informazioni latenti rumorose per guidare la denoising, preservando il contenuto non modificato e la coerenza visiva. Il metodo evita la raccolta estensiva di dati e l'addestramento del modello, affrontando la sottoutilizzazione delle informazioni latenti rumorose negli approcci esistenti senza ottimizzazione.
Fatti principali
- Proposto un framework di montaggio video basato su istruzioni e senza ottimizzazione
- Strategia di Inizializzazione Strutturale del Rumore (SNIS) assegna rumore più alto alle regioni modificate, più basso a quelle non modificate
- Meccanismo di Guida del Rumore (NGM) integra informazioni latenti rumorose
- Evita la raccolta estensiva di dati e l'addestramento del modello
- Affronta la sottoutilizzazione del rumore latente nei metodi esistenti
- Obiettivo di preservare il contenuto non modificato e la coerenza visiva
- Pubblicato su arXiv con ID 2605.15533
Entità
Istituzioni
- arXiv