Text2GraphQuery-Bench: Primo Benchmark per Tutti i Principali Linguaggi di Query per Grafi
Text2GraphQuery-Bench è stato lanciato da ricercatori come il benchmark inaugurale che comprende tutti i principali linguaggi dichiarativi di query per grafi a proprietà, inclusi Cypher, GQL e SQL/PGQ. Questo benchmark affronta il problema di convertire il linguaggio naturale in query funzionali per grafi, essenziale per consentire ai grandi modelli linguistici (LLM) di agire come interfacce per i sistemi di gestione di database a grafi (GDBMS). I benchmark attuali non coprono sufficientemente la diversità linguistica, dipendono da sintesi rigide e mancano di una valutazione approfondita. Composto da 267.276 coppie (Domanda, Query per Grafi) su 34 database e 13 domini, Text2GraphQuery-Bench è progettato per essere adattato da varie fonti. Questo progresso è fondamentale per l'analisi dei dati, poiché i linguaggi di query per grafi sono spesso più complessi e meno intuitivi di SQL, ponendo sfide di apprendimento per gli utenti. Il benchmark mira a unificare la valutazione e promuovere avanzamenti nei sistemi di text-to-graph-query.
Fatti principali
- Text2GraphQuery-Bench è il primo benchmark che copre Cypher, GQL e SQL/PGQ.
- Contiene 267.276 coppie (Domanda, Query per Grafi).
- Il benchmark copre 34 database e 13 domini.
- Affronta le limitazioni dei benchmark esistenti: copertura linguistica limitata, sintesi rigida e mancanza di valutazione completa.
- Il benchmark supporta l'adattamento da risorse eterogenee.
- I linguaggi di query per grafi sono diversi e meno familiari di SQL, rendendoli più difficili da imparare.
- I sistemi Text2GraphQuery consentono ai LLM di fungere da interfacce per i GDBMS.
- Il benchmark è presentato nell'articolo arXiv 2602.11745.
Entità
—