ARTFEED — Contemporary Art Intelligence

Storie Fuorvianti Dirottano gli Agenti di Chiamata agli Strumenti: Nuovo Benchmark e Intervento

ai-technology · 2026-08-07

Un recente articolo su arXiv (2608.06057) discute come gli agenti di chiamata agli strumenti in interazioni multi-turno in corso possano essere fuorviati da dati storici che, sebbene strutturalmente validi e semanticamente ragionevoli, mancano di autorità per la richiesta corrente. Gli autori illustrano che questa storia 'inquinata' può distorcere una politica esistente, con Qwen3-1.7B che mostra uno spostamento del 32,1% nelle decisioni corrette basate sulla traiettoria originale, portando spesso al riutilizzo di entità contaminate o norme di interfaccia. Per contrastare questo problema, presentano un benchmark accoppiato con viste sincronizzate Originale, Inquinata e Stato Oracle, che mantengono la politica del sistema, gli strumenti attuali, l'ultima richiesta e la prossima azione ideale. Inoltre, suggeriscono undici interventi per identificare fallimenti nel processo decisionale, nel legame delle entità e nell'esecuzione dell'interfaccia. Infine, introducono una tecnica per trasferire una politica insegnante condizionata da Oracle a uno studente che vede solo la storia inquinata, mirata a migliorare la robustezza. L'articolo è accessibile su arXiv con l'identificatore 2608.06057.

Fatti principali

  • Gli agenti di chiamata agli strumenti deducono lo stato del compito dal dialogo accumulato e dalle tracce degli strumenti.
  • Le tracce storiche possono rimanere strutturalmente valide e semanticamente plausibili dopo aver cessato di essere autorevoli.
  • L'inquinamento capovolge il 32,1% delle decisioni corrette sotto la traiettoria originale su Qwen3-1.7B.
  • L'inquinamento induce il riutilizzo di entità corrotte o convenzioni di interfaccia.
  • Viene introdotto un benchmark accoppiato con viste Originale, Inquinata e Stato Oracle.
  • Undici interventi che preservano l'oro isolano fallimenti nello stato decisionale, nel legame delle entità e nell'esecuzione dell'interfaccia.
  • Un metodo trasferisce una politica insegnante condizionata da Oracle a uno studente che osserva solo la storia inquinata.
  • L'articolo è disponibile su arXiv con l'identificatore 2608.06057.

Entità

Istituzioni

  • arXiv

Fonti