SecRespond: Benchmark per Agenti AI nella Risposta a Incidenti Post-Compromissione
I ricercatori hanno presentato SecRespond, il primo benchmark progettato per valutare gli agenti basati su Large Language Model (LLM) nel contesto dei flussi di lavoro di risposta a incidenti post-compromissione. Gli attuali benchmark di cybersecurity si concentrano principalmente su situazioni pre-compromissione, lasciando un significativo vuoto nell'analisi post-compromissione. SecRespond assegna agli agenti il compito di esaminare snapshot forensi di dischi da host compromessi, insieme ad avvisi, scansioni di vulnerabilità e controlli di base provenienti da prodotti di sicurezza. Ci si aspetta che gli agenti generino report forensi che descrivano intrusioni, rischi di base e minacce di vulnerabilità, oltre a proporre una strategia di remediation. Questo benchmark viene applicato a 10 cyber range, ciascuno progettato per replicare scenari autentici post-compromissione. Questa iniziativa colma un vuoto cruciale nella valutazione degli agenti LLM per operazioni di sicurezza pratiche che coinvolgono artefatti host e interfacce a riga di comando.
Fatti principali
- SecRespond è il primo benchmark per la risposta a incidenti post-compromissione che utilizza agenti LLM.
- I benchmark esistenti si concentrano su contesti pre-compromissione.
- Gli agenti analizzano snapshot forensi di dischi, avvisi, scansioni di vulnerabilità e controlli di base.
- Gli agenti devono produrre report forensi e un piano di remediation.
- Il benchmark è istanziato su 10 cyber range.
- Gli agenti LLM sono sempre più utilizzati in operazioni di sicurezza reali.
- Il benchmark valuta la capacità degli agenti di gestire artefatti host e CLI.
- Il lavoro è stato pubblicato su arXiv (2607.26791).
Entità
Istituzioni
- arXiv