Synchronized Logit Steering: Un Nuovo Metodo Steganografico per LLM
Un recente articolo pubblicato su arXiv (2608.14697) presenta Synchronized Logit Steering (SLS), una tecnica steganografica deterministica per modelli linguistici di grandi dimensioni (LLM) che elimina la necessità che mittente e destinatario abbiano lo stesso contesto di prompt. I metodi convenzionali di steganografia a livello di token e logit dipendono da questo contesto condiviso, che spesso non è disponibile in ambienti di produzione che utilizzano generazione aumentata da recupero o istruzioni proprietarie. SLS genera un prompt proxy dall'output, consentendo a entrambe le parti di ricreare la stessa distribuzione di logit senza bisogno del prompt originale. L'approccio codifica i valori del payload come ranghi di token in aree ad alta entropia della distribuzione proxy e lo potenzia con ricorrenza periodica e raffiche di payload per aumentare la densità informativa. Esperimenti condotti sui dataset ShareGPT, GSM8K e SWE-bench Verified dimostrano una divergenza KL minimizzata tra le distribuzioni dei prompt veri e proxy, mostrando un efficace incorporamento steganografico. Questa ricerca affronta un problema significativo nella comunicazione occulta tramite LLM, con potenziali implicazioni per la sicurezza informatica e l'etica dell'IA.
Fatti principali
- L'articolo arXiv:2608.14697 introduce Synchronized Logit Steering (SLS).
- SLS è uno schema steganografico deterministico per modelli linguistici di grandi dimensioni.
- Elimina la necessità di un contesto di prompt condiviso tra mittente e destinatario.
- SLS deriva un prompt proxy dall'output generato.
- I valori del payload sono codificati come ranghi di token in regioni ad alta entropia.
- Lo schema utilizza ricorrenza periodica e raffiche di payload per scalare la densità informativa.
- Gli esperimenti sono stati condotti sui dataset ShareGPT, GSM8K e SWE-bench Verified.
- L'articolo riporta una divergenza KL minimizzata tra le distribuzioni dei prompt veri e proxy.
Entità
Istituzioni
- arXiv