VisDeception: Benchmark Testa la Robustezza dei VLM contro Grafici Ingannevoli

Un team di ricercatori ha lanciato VisDeception, il primo benchmark controllato e accoppiato progettato per valutare la resilienza dei modelli linguistico-visivi (VLM) contro progetti grafici fuorvianti. Questo benchmark presenta 1.600 coppie di grafici accurati e ingannevoli in otto categorie principali di tecniche di visualizzazione fuorvianti, come assi invertiti o troncati, proporzioni distorte, codifiche improprie e schemi cromatici ingannevoli. Ogni grafico ingannevole è abbinato a una versione veritiera derivata dallo stesso set di dati. L'iniziativa mira a valutare la suscettibilità dei VLM a tali visualizzazioni fuorvianti, essenziale per un'analisi dei dati affidabile, poiché i VLM sono sempre più utilizzati per interpretare grafici e condurre ragionamenti analitici. Il benchmark separa efficacemente gli errori di ragionamento causati dall'inganno da altre influenze.