LLM e Umani Divergono sugli Standard di Creatività Contestuale
Una recente indagine pubblicata su arXiv (2607.22218) esplora le condizioni in cui i grandi modelli linguistici (LLM) si allineano o differiscono dalle valutazioni umane della creatività. I ricercatori hanno condotto tre studi utilizzando sei popolari LLM e hanno scoperto che questi modelli dipendono da una gamma più limitata di criteri di valutazione della creatività umana. L'allineamento con gli standard umani è più pronunciato in termini di novità, mentre le maggiori discrepanze si verificano nell'aspetto contestuale, che comprende fattori sociali, di mercato e reputazionali. Ogni LLM mostra criteri di valutazione unici che differiscono significativamente in portata. Nello Studio 2, che ha analizzato 1.103 idee, queste variazioni negli standard erano evidenti nelle valutazioni effettive della creatività, sottolineando le sfide nell'uso degli LLM per la valutazione della creatività senza riconoscere i loro pregiudizi intrinseci.
Fatti principali
- Studio pubblicato su arXiv con ID 2607.22218
- Tre studi condotti utilizzando sei LLM ampiamente utilizzati
- Gli LLM si basano su un sottoinsieme più ristretto di standard di creatività umani
- La convergenza più forte con gli umani nella dimensione della novità
- La divergenza più chiara nella dimensione contestuale (sociale, di mercato, reputazionale)
- Ogni LLM ha standard distinti e specifici del modello
- Lo Studio 2 ha coinvolto 1.103 idee
- Le differenze negli standard si sono riflesse nei giudizi effettivi di creatività
Entità
Istituzioni
- arXiv