FilmBench: Benchmark per la generazione video cinematografica dall'Accademia del Cinema di Pechino
Ricercatori dell'Accademia del Cinema di Pechino e del Gruppo Hujing Digital Media & Entertainment hanno sviluppato FilmBench, un benchmark text-to-video e reference-to-video basato su criteri professionali di linguaggio cinematografico. A differenza dei benchmark esistenti che utilizzano prompt provenienti dal web e modelli multimodali generici, FilmBench valuta la generazione video secondo standard accademici cinematografici, sviluppati in collaborazione con registi e docenti. I prompt sono ottenuti tramite reverse engineering da clip cinematografiche, e la tassonomia di valutazione include criteri professionali anziché la semplice qualità visiva e l'allineamento testuale. Il benchmark mira a valutare l'artigianato di livello cinematografico, non la mera plausibilità del video.
Fatti principali
- FilmBench è un benchmark text-to-video (T2V) e reference-to-video (R2V).
- Si basa sul linguaggio cinematografico professionale della tradizione accademica cinematografica.
- Sviluppato in collaborazione con registi e docenti dell'Accademia del Cinema di Pechino e del Gruppo Hujing Digital Media & Entertainment.
- I prompt sono ottenuti tramite reverse engineering da clip di film.
- La valutazione utilizza criteri professionali di linguaggio cinematografico invece di modelli multimodali generici.
- I benchmark esistenti utilizzano prompt provenienti dal web o template LLM e modelli non addestrati.
- Le attuali tassonomie di valutazione si concentrano sulla qualità visiva complessiva, l'allineamento testuale approssimativo e la fluidità temporale.
- FilmBench valuta l'artigianato di livello cinematografico, non la mera plausibilità del video.
Entità
Istituzioni
- Beijing Film Academy
- Hujing Digital Media & Entertainment Group
Luoghi
- Beijing
- China