ReGraph: Nuovo Dataset per la Generazione di Grafi di Ricette da Immagini di Cibo
I ricercatori hanno introdotto ReGraph, un dataset di grafi di ricette su larga scala progettato per migliorare la generazione di ricette da immagini di cibo, rappresentando esplicitamente la conoscenza procedurale di cucina. Il dataset codifica ingredienti, azioni di cottura e strumenti come entità, con attributi che descrivono i cambiamenti di stato degli ingredienti e relazioni tipizzate che catturano obiettivi di manipolazione, destinazioni e ordine procedurale. Questa rappresentazione strutturata mira a superare i limiti degli attuali Grandi Modelli Multimodali (LMM), che spesso producono descrizioni testuali plausibili senza codificare la conoscenza a livello di processo. ReGraph fornisce una base per valutare se le uscite del modello comprendono realmente il processo strutturato di trasformazione della cucina. Il dataset è descritto in un articolo intitolato 'ReGraph: Learning to Generate Recipe Graphs from Food Images', disponibile su arXiv (arXiv:2608.06917). Il lavoro è significativo per i campi della visione artificiale e dell'elaborazione del linguaggio naturale, offrendo una nuova risorsa per la ricerca sulla comprensione procedurale e l'apprendimento multimodale.
Fatti principali
- ReGraph è un dataset di grafi di ricette su larga scala.
- Rappresenta ingredienti, azioni di cottura e strumenti come entità.
- Gli attributi delle entità descrivono i cambiamenti di stato degli ingredienti.
- Le relazioni tipizzate codificano obiettivi di manipolazione, destinazioni e ordine procedurale.
- Il dataset affronta i limiti degli attuali Grandi Modelli Multimodali (LMM).
- L'articolo è intitolato 'ReGraph: Learning to Generate Recipe Graphs from Food Images'.
- L'articolo è disponibile su arXiv con identificativo arXiv:2608.06917.
- Il lavoro si concentra sul rendere esplicita e composizionale la conoscenza procedurale della cucina.
Entità
Istituzioni
- arXiv