REC-CBM: Modelli a Collo di Bottiglia Concettuale Consapevoli delle Rubriche per la Valutazione
I ricercatori hanno introdotto REC-CBM, un modello a collo di bottiglia concettuale con correzione degli errori consapevole delle rubriche, mirato a una valutazione affidabile di domande aperte. I tradizionali modelli a collo di bottiglia concettuale (CBM) sono insufficienti per questo tipo di valutazione poiché non rappresentano esplicitamente le dimensioni dettagliate delle rubriche, affrontano in modo inadeguato la natura ordinale delle scale di punteggio e trascurano i problemi di affidabilità nelle annotazioni umane. Integrando la consapevolezza delle rubriche e la correzione degli errori, REC-CBM cerca di superare queste sfide, promuovendo processi di valutazione trasparenti e interpretabili. Questo sistema è progettato per rafforzare la fiducia nelle valutazioni automatizzate, consentendo agli educatori di verificare le motivazioni alla base dei punteggi. I risultati sono disponibili su arXiv con l'identificatore 2605.27402.
Fatti principali
- REC-CBM è un modello a collo di bottiglia concettuale con correzione degli errori consapevole delle rubriche.
- I CBM standard non modellano le dimensioni granulari delle rubriche.
- I CBM standard catturano in modo inadeguato la semantica ordinale delle scale di punteggio.
- I CBM standard trascurano i problemi di affidabilità nelle annotazioni concettuali umane.
- REC-CBM mira a fornire processi di valutazione trasparenti e interpretabili.
- Il sistema è progettato per una valutazione affidabile di domande aperte.
- Il lavoro è pubblicato su arXiv con l'identificatore 2605.27402.
Entità
Istituzioni
- arXiv