IMPACT-HOI: Framework a Iniziativa Mista per l'Annotazione di Video Egocentrici
IMPACT-HOI è un approccio collaborativo per annotare video incentrati sulle interazioni tra persone e oggetti. Considera il processo di annotazione come un modo per chiarire gradualmente eventi che iniziano con alcune informazioni iniziali. Un controller intelligente aiuta offrendo domande dirette, suggerimenti verificati da persone e completamenti attenti, tenendo conto anche delle azioni dell'annotatore e della qualità delle prove. Per evitare che le modifiche automatiche prevalgano sulle decisioni umane, viene utilizzato un sistema di esecuzione attento con capacità di rollback. In uno studio con 9 partecipanti, si è registrata una riduzione del 13,5% delle attività manuali, un tasso di corrispondenza degli eventi del 46,67% e nessuna violazione nei campi confermati. Il codice sarà reso disponibile pubblicamente.
Fatti principali
- IMPACT-HOI è un framework a iniziativa mista per l'annotazione di video procedurali egocentrici.
- Costruisce grafi di eventi strutturati per le Interazioni Uomo-Oggetto (HOI).
- Il framework utilizza un controller calibrato sulla fiducia per la selezione delle query.
- Un protocollo di esecuzione con rollback atomico a rischio limitato preserva le decisioni umane.
- Uno studio con 9 partecipanti ha mostrato una riduzione del 13,5% delle azioni manuali.
- Il tasso di corrispondenza degli eventi è stato del 46,67%.
- Non si sono verificate violazioni nei campi confermati sotto il protocollo studiato.
- Il codice sarà reso disponibile pubblicamente.
Entità
—