Nuovo test misura la cognizione evolutiva dei LLM tramite completamento di frasi

Un nuovo strumento chiamato Developmental Sentence Completion Test (DSCT) è stato presentato dai ricercatori. Questa valutazione composta da 20 item mira a valutare la struttura a stadi nelle risposte generate dai LLM, basandosi sulla teoria costruttivo-evolutiva di Robert Kegan. Le tecniche attuali si basano su interviste con esperti o strumenti di completamento di frasi esclusivi, che mancano di scalabilità. Il DSCT raccoglie segnali evolutivi attraverso testi autosomministrati, ma le risposte sono etichettate anziché legate a stadi evolutivi validati a livello individuale. La ricerca indaga fino a che punto i LLM possono recuperare questo segnale evolutivo.