Bias di Colore nei Modelli Linguistico-Visivi: Prompt Visivi Nascosti Alterano il Sentiment
Uno studio recente pubblicato su arXiv (2608.14286) esplora l'impatto dei bias di stile visivo, in particolare il colore, sui modelli linguistico-visivi (VLM) quando analizzano testo raffigurato in immagini. Gli autori presentano 'Prompt Visivi Nascosti', che modificano discretamente le caratteristiche visive come colore e contrasto mantenendo il significato originale. I risultati rivelano che evidenziare parole positive in verde sposta costantemente le previsioni di sentiment verso il positivo, suggerendo che i VLM spesso trascurano lo stile visivo, portando a conclusioni distorte. Questa scoperta comporta rischi per le applicazioni industriali che utilizzano i VLM, inclusi strumenti di reclutamento e sistemi di raccomandazione. La ricerca esamina meticolosamente come lo stile visivo influenzi le prestazioni dei VLM e indaga gli effetti di questi cambiamenti sulle rappresentazioni latenti nell'encoder visivo. L'articolo, intitolato 'Vedere Rosso, Pensare Male: Bias di Colore nei Modelli Linguistico-Visivi', è scritto da ricercatori ed è disponibile su arXiv.
Fatti principali
- ID articolo: arXiv:2608.14286
- Tipo di annuncio: cross
- Introduce 'Prompt Visivi Nascosti' che modificano lo stile visivo (colore, contrasto) preservando la semantica
- Colorare parole positive in verde sposta le previsioni di sentiment verso il positivo
- I VLM spesso non tengono conto dei bias di stile visivo
- I VLM sono utilizzati nel processo decisionale industriale (reclutamento, raccomandazione)
- Lo studio analizza le rappresentazioni latenti dell'encoder visivo
- Pubblicato sul server di preprint arXiv
Entità
Istituzioni
- arXiv