Studio sui LLM Rivela Pregiudizi Sociali Contro i Senzatetto nel Discorso Online e Offline
Uno studio recente pubblicato su arXiv (2508.13187) introduce il primo corpus multi-dominio volto a identificare i pregiudizi sociali verso le persone che vivono in condizione di senzatetto (PEH). Pubblicato come annuncio replace-cross, la ricerca affronta il problema in corso dei senzatetto, che nel 2025 ha colpito più di 876.000 persone negli Stati Uniti. Gli autori sottolineano che il pregiudizio sociale ostacola significativamente gli sforzi per combattere il fenomeno, influenzando gli atteggiamenti pubblici e le decisioni politiche. Hanno esaminato sia i media online che le discussioni dei consigli comunali offline per scoprire questi pregiudizi. Il corpus presenta una tassonomia multi-etichetta a 16 categorie, inclusa una serie gold-standard di 1.698 elementi annotati da valutatori addestrati e 48.389 testi etichettati da GPT-4.1. Le fonti dei dati spaziavano da Reddit, X (ex Twitter), testate giornalistiche e trascrizioni dei consigli comunali di dieci città statunitensi tra il 2015 e il 2025. Lo studio ha valutato sei LLM sollecitati rispetto alla serie gold-standard, fornendo punteggi F1 insieme a audit sul divario di prevalenza. I risultati mostrano che, sebbene gli LLM possano rilevare i pregiudizi, la loro calibrazione necessita di miglioramenti, offrendo spunti cruciali per affrontare i pregiudizi sociali contro i PEH e influenzare le politiche pubbliche e la rappresentazione mediatica.
Fatti principali
- Nel 2025, negli Stati Uniti sono state registrate oltre 876.000 persone in condizione di senzatetto.
- Lo studio rilascia il primo corpus multi-dominio sui pregiudizi verso i PEH con una tassonomia multi-etichetta a 16 categorie.
- Il corpus include una serie gold-standard stratificata di 1.698 elementi annotati da valutatori addestrati dai partner.
- Nel corpus sono inclusi 48.389 testi etichettati da GPT-4.1.
- Le fonti dei dati includono Reddit, X (ex Twitter), notizie e trascrizioni di riunioni del consiglio.
- I dati sono stati raccolti da dieci città statunitensi, coprendo il periodo 2015-2025.
- Sei LLM sollecitati sono stati valutati sulla serie gold-standard.
- Sono stati utilizzati audit sul divario di prevalenza per integrare i punteggi F1.
- Punteggi F1 moderati coesistono con grandi errori di calibrazione nelle prestazioni degli LLM.
Entità
Istituzioni
- arXiv
- X (formerly Twitter)
Luoghi
- United States