HyperTransport: Condizionamento Ammortizzato per Modelli T2I
Un nuovo metodo chiamato HyperTransport utilizza una iperrete per ammortizzare il costo dello steering dell'attivazione nei modelli generativi text-to-image. Le tecniche di steering esistenti richiedono un'ottimizzazione per concetto, rendendole lente per insiemi di concetti grandi o in evoluzione. HyperTransport mappa gli embedding di un encoder CLIP preaddestrato direttamente ai parametri di intervento, addestrato end-to-end, consentendo un condizionamento rapido al momento della richiesta senza fine-tuning.
Fatti principali
- HyperTransport è un framework a iperrete per il condizionamento ammortizzato.
- Affronta la fragilità del prompting e l'alto costo del fine-tuning.
- I metodi di steering dell'attivazione esistenti necessitano di ottimizzazione per concetto.
- HyperTransport mappa gli embedding CLIP ai parametri di intervento.
- Il metodo è addestrato end-to-end.
- Consente un'implementazione rapida per insiemi di concetti grandi o in evoluzione.
- L'articolo è su arXiv con ID 2605.08254.
- L'approccio è mirato ai modelli generativi text-to-image.
Entità
Istituzioni
- arXiv
- CLIP