Attacchi di Iniezione di Prompt Fisici su Robot Controllati da VLM: Uno Studio Sistematico
Un recente preprint su arXiv (2608.05715) descrive in dettaglio un esame completo degli attacchi di iniezione di prompt fisici mirati a robot gestiti da modelli visione-linguaggio (VLM). Lo studio classifica gli attacchi in quattro tipi: segnaletica indiretta, impersonificazione dell'autorità, ridefinizione del compito e iniezione di conflitto, supportati da un benchmark di 20 prompt di attacco distinti. Questi prompt sono stati testati in tre diverse configurazioni di scena fisica e tre variazioni di formulazione dei comandi, che differiscono per specificità e chiarezza delle regole. In oltre 5.670 prove che hanno coinvolto tre VLM leader (GPT-4o, Gemini 2.5 Flash, Qwen3-VL-32B), i tassi di successo degli attacchi sono stati registrati al 27,0% e al 29,4%, con un terzo tasso non specificato. Questa ricerca rivela una nuova vulnerabilità in cui testo avversario nel campo visivo di un robot può fungere da iniezione di prompt indiretta nel ragionamento del VLM, sollevando preoccupazioni sulla sicurezza e l'affidabilità dei sistemi autonomi. I risultati sottolineano l'urgente necessità di difese robuste nella pianificazione robotica guidata da VLM, specialmente mentre queste tecnologie vengono sempre più utilizzate in scenari pratici. Questo articolo è accessibile su arXiv ed è stato segnalato come una sottomissione di tipo incrociato.
Fatti principali
- Il preprint arXiv 2608.05715 presenta uno studio sistematico degli attacchi di iniezione di prompt fisici su robot controllati da VLM.
- Lo studio introduce una tassonomia a quattro categorie: segnaletica indiretta, ridefinizione del compito, impersonificazione dell'autorità e iniezione di conflitto.
- Un benchmark di 20 prompt di attacco è stato valutato in tre diverse disposizioni di scena fisica e tre formulazioni di comando.
- Sono state condotte 5.670 prove su tre VLM all'avanguardia: GPT-4o, Gemini 2.5 Flash e Qwen3-VL-32B.
- I tassi di successo degli attacchi sono stati del 27,0% per GPT-4o, del 29,4% per Gemini 2.5 Flash e un terzo tasso non specificato.
- La superficie di attacco coinvolge testo avversario nel campo visivo del robot che funge da iniezione di prompt indiretta.
- Lo studio sottolinea la vulnerabilità dei sistemi di pianificazione robotica basati su VLM.
- L'articolo è stato annunciato come una sottomissione di tipo incrociato su arXiv.
Entità
Istituzioni
- arXiv