Il post-addestramento riduce il comportamento umanoide nei LLM

Un nuovo studio introduce Psych-201, un dataset per misurare l'allineamento comportamentale tra LLM e umani. La ricerca rileva che il post-addestramento, che converte i modelli base in assistenti, riduce costantemente l'allineamento tra famiglie e dimensioni di modelli. Questo disallineamento aumenta nelle generazioni di modelli più recenti. L'induzione di persona, una tecnica per elicitare risposte umanoidi, non migliora le previsioni a livello individuale. I risultati suggeriscono che i metodi attuali per rendere utili gli LLM li rendono anche modelli meno accurati del comportamento umano.