Proposta di Scheda di Valutazione XAI per Standardizzare la Rendicontazione delle Metriche
Una recente pubblicazione su arXiv introduce la XAI Evaluation Card, un modello volto a standardizzare la documentazione delle metriche di valutazione per l'IA spiegabile (XAI). Gli autori sottolineano la trasparenza come una preoccupazione significativa, notando che le metriche sono spesso scarsamente definite, inadeguatamente riportate e non validate rispetto a basi di riferimento consolidate. Questa scheda impone una chiara dichiarazione delle proprietà target, dei livelli di fondamento, delle ipotesi relative alle metriche, della prova di validazione, dei rischi di manipolazione e dei casi di fallimento riconosciuti. Adottare questo modello come standard all'interno della comunità potrebbe aiutare a ridurre la frammentazione nelle valutazioni, facilitare le meta-analisi e migliorare la responsabilità nella ricerca XAI.
Fatti principali
- L'articolo propone la XAI Evaluation Card per standardizzare la rendicontazione delle metriche XAI
- Identifica la mancanza di standardizzazione nella valutazione XAI
- Le metriche sono definite in modo incoerente e riportate in modo incompleto
- Raramente validate rispetto a basi di riferimento comuni
- La scheda copre proprietà target, livelli di fondamento, ipotesi, validazione, rischi di manipolazione, casi di fallimento
- Mira a ridurre la frammentazione delle valutazioni
- Supporta meta-analisi e responsabilità
- Pubblicato su arXiv
Entità
Istituzioni
- arXiv