CyBOKClaw: Framework Human-in-the-Loop per la Mappatura dei Curricula di Cybersecurity
CyBOKClaw è un sistema di recupero human-in-the-loop che interpreta parole chiave o frasi (KWoP) relative alla cybersecurity e le collega al Cyber Security Body of Knowledge (CyBOK). Questo framework funge da generatore di candidati top-k da sottoporre a revisione da parte di esperti, incorporando normalizzazione delle query, espansione dei termini curata, miglioramenti a livello concettuale, descrizioni tematiche arricchite e criteri di ranking sensibili al dominio. Affronta il problema che i KWoP educativi sono spesso vaghi, ampi e solo vagamente correlati alla terminologia CyBOK, rendendo inadeguato il semplice matching esatto. La valutazione impiega metriche di recupero strutturale insieme a una metrica di utilità guidata da esperti chiamata ECA-5 (Exact or Closest Acceptable Match at top-5), che valuta se i candidati restituiti includono almeno una mappatura considerata esatta o accettabile da un esperto.
Fatti principali
- CyBOKClaw è un framework di recupero human-in-the-loop.
- Mappa parole chiave o frasi (KWoP) di cybersecurity a CyBOK.
- Il framework è un generatore di candidati top-k per la revisione da parte di esperti.
- Utilizza normalizzazione delle query, espansione dei termini, potenziamenti concettuali, arricchimento tematico e ranking sensibile al dominio.
- I KWoP educativi sono spesso ampi, ambigui e solo approssimativamente allineati con CyBOK.
- Il matching esatto rigoroso fornisce solo un'utilità pratica parziale.
- La valutazione utilizza metriche di recupero strutturale e ECA-5.
- ECA-5 registra se i primi 5 candidati contengono almeno un match esatto o accettabile.
Entità
Istituzioni
- CyBOK
- arXiv