Flow Map Reward Guidance: Allineamento del Modello Generativo Senza Addestramento
Un nuovo metodo chiamato Flow Map Reward Guidance (FMRG) riformula la guida del modello generativo come un problema di controllo ottimo deterministico. FMRG utilizza la mappa di flusso—un concetto derivante dall'inferenza veloce—per integrare e guidare il flusso in una singola traiettoria senza addestramento. Alla scala text-to-image, eguaglia o supera i baselines in problemi inversi, trasferimento di stile e preferenze umane. L'approccio sussume i metodi di guida esistenti al livello più grossolano di una gerarchia di algoritmi.
Fatti principali
- FMRG è un framework senza addestramento e a traiettoria singola.
- Riformula la guida come un problema di controllo ottimo deterministico.
- La mappa di flusso emerge naturalmente nella soluzione ottima.
- FMRG eguaglia o supera i baselines alla scala text-to-image.
- Le applicazioni includono problemi inversi, trasferimento di stile e preferenze umane.
- I metodi di guida esistenti richiedono schemi costosi a molte particelle e molti passi.
- FMRG sussume gli approcci esistenti al livello più grossolano.
- Il lavoro è pubblicato su arXiv con ID 2604.27147.
Entità
Istituzioni
- arXiv