Gating deterministico di eseguibilità per la selezione di competenze LLM su larga scala

Un articolo arXiv (2608.01050) introduce un pipeline di selezione in tre fasi implementato per Helpmate, l'assistente di assistenza clienti di Wix, che affronta il problema che la sola rilevanza semantica non è sufficiente per valutare se una competenza può essere eseguita in base allo stato attuale dell'account. Inizialmente, un matcher semantico focalizzato sul recall identifica i messaggi pertinenti a una famiglia di dominio di dieci competenze senza fare riferimento allo stato dell'account. Successivamente, un gate deterministico di eseguibilità filtra i candidati che non possono procedere a causa di condizioni di stop interno, garantendo che qualsiasi candidato bloccato rimanga non eseguibile nello stesso stato dell'account, a condizione che la parità dei predicati sia mantenuta e che entrambi i controlli riflettano l'ultimo stato autorevole. Infine, l'LLM determina se attivare uno dei candidati rimanenti. L'articolo presenta anche un'analisi di 756.6K messaggi utente provenienti da 267.6K conversazioni dopo il lancio.