DungeonBench: Benchmarking del Ragionamento Tattico nel Combattimento di D&D
È stato lanciato un nuovo standard noto come DungeonBench per valutare il ragionamento tattico negli scenari di combattimento di Dungeons & Dragons. Questo benchmark comprende quasi tutto il materiale relativo al combattimento del System Reference Document del 2014, preservando meccaniche che di solito vengono trascurate dai simulatori di combattimento semplificati. DungeonBench offre una panoramica tattica completa in ogni fase, inclusa una decisione da prendere e un elenco dettagliato di possibili azioni, come movimento, attacchi, incantesimi, reazioni, obiettivi, preparazioni e risorse limitate. L'obiettivo è valutare le scelte valide in base all'economia delle azioni, alle caratteristiche delle creature, alla disposizione del campo di battaglia, ai tempi e alle condizioni future. Questo benchmark mira a migliorare il test del ragionamento tattico complesso nelle valutazioni esistenti di giochi e simulatori. L'articolo è disponibile su arXiv con identificativo 2607.29577.
Fatti principali
- DungeonBench è un benchmark per il ragionamento tattico nel combattimento di Dungeons & Dragons.
- Copre la stragrande maggioranza del contenuto del System Reference Document del 2014 rilevante per il combattimento.
- Il benchmark mantiene meccaniche che i simulatori di combattimento semplificati spesso astraggono.
- Ad ogni passo, espone un'osservazione tattica completa, una decisione pendente e un elenco indicizzato di opzioni eseguibili.
- Le opzioni spaziano da movimento, attacchi, incantesimi, reazioni, obiettivi, preparazione e risorse scarse.
- Il compito è valutare le scelte legali le cui conseguenze dipendono dall'economia delle azioni, dai tratti delle creature, dalla geometria del campo di battaglia, dalle finestre temporali e dagli stati futuri.
- Il benchmark affronta la sotto-valutazione del ragionamento tattico ricco di regole negli attuali benchmark di giochi e simulatori.
- L'articolo è disponibile su arXiv con identificativo 2607.29577.
Entità
Istituzioni
- arXiv