Neuroevolution Arena: Nuovo Benchmark per la Valutazione dell'IA nei Sistemi di Vita Artificiale
Uno studio recente pubblicato su arXiv (2608.10323) presenta Neuroevolution Arena, un'ecologia spaziale potenziata da GPU di cellule di reti neurali con parametri indipendenti, finalizzata a valutare controller addestrati in contesti competitivi di vita artificiale. La ricerca rivela che i controller addestrati possono ricevere classifiche variabili quando valutati durante l'addestramento rispetto alle valutazioni ecologiche, rendendo necessario un protocollo di valutazione annidato. Questo protocollo integra tre specifici regimi di aggiornamento ed ereditarietà (EvoEvo, EvoRL e RLRL) con due architetture neurali, conducendo 50.000 generazioni in tre esecuzioni di addestramento separate per ciascuna condizione. Dalle 18 esecuzioni, un artefatto di controller d'élite viene scelto per un design di valutazione congelata che coinvolge 198 compiti computazionali. I risultati iniziali suggeriscono che i regimi abilitati a RL mostrano una fitness di addestramento superiore rispetto a EvoEvo, ma le valutazioni ecologiche producono una classifica diversa. Questo studio colma una lacuna significativa nella valutazione degli agenti IA in contesti dinamici e competitivi, fornendo una misura più accurata rispetto alle metriche di addestramento convenzionali.
Fatti principali
- Neuroevolution Arena è un'ecologia spaziale accelerata da GPU di cellule di reti neurali con parametri indipendenti.
- Lo studio utilizza un protocollo di valutazione annidato con tre regimi di aggiornamento ed ereditarietà: EvoEvo, EvoRL e RLRL.
- Due architetture neurali vengono incrociate con i regimi per 50.000 generazioni in tre esecuzioni di addestramento indipendenti per condizione.
- 18 artefatti di controller d'élite vengono selezionati per un design di valutazione congelata allineato che comprende 198 lavori computazionali.
- Gli effetti a coppie mediano tre contesti ecologici definiti da seme: due che permettono cooperazione e uno che permette attacco.
- I regimi abilitati a RL raggiungono una fitness di addestramento registrata superiore rispetto a EvoEvo.
- I risultati a coppie mostrano una classifica diversa sotto valutazione ecologica rispetto alla fitness di addestramento.
- La ricerca è pubblicata su arXiv con l'identificatore 2608.10323.
Entità
Istituzioni
- arXiv