I risultati degli strumenti superano il testo semplice nell'adozione di affermazioni da parte dell'IA, secondo uno studio
Uno studio recente pubblicato su arXiv (2608.14992) esplora come il formato di presentazione di un messaggio contenente un'affermazione non supportata influenzi la probabilità che un modello di IA la accetti. In un compito di ricerca sintetica, Claude Opus 5 è stato incaricato di scegliere un codice colore per un elemento specificato o di rinunciare. I risultati hanno indicato un notevole aumento nell'accettazione di codici falsi quando l'affermazione era presentata come record di risultato di uno strumento (14/24 prove) rispetto a una dichiarazione precedente dell'assistente (0/22 prove valutabili) o all'assenza di un'affermazione target (0/24). Inoltre, un wrapper di metadati che indicava il risultato come non verificato ha portato a tassi di adozione elevati (15/24). Una replica preregistrata ha corroborato la disparità tra le condizioni di risultato dello strumento e di asserzione dell'assistente (7/24 vs 0/24), suggerendo che le presentazioni di risultati di strumenti possono essere percepite come più autorevoli dai sistemi di IA.
Fatti principali
- Studio su arXiv:2608.14992
- Claude Opus 5 utilizzato in un compito di ricerca sintetica
- Adozione di codici falsi: 0/24 senza affermazione target, 0/22 con asserzione dell'assistente, 14/24 con record di risultato dello strumento, 15/24 con wrapper di metadati
- Il braccio con risultato dello strumento ha selezionato il codice del record in 11/12 prove supportate e 14/24 prove non supportate
- Replica preregistrata: 7/24 vs 0/24
- Lo studio suggerisce che il formato di risultato dello strumento ha più autorità
- Implicazioni per i sistemi di IA che leggono da archivi che essi stessi scrivono
Entità
Istituzioni
- arXiv