LyEvO: Un nuovo quadro per l'apprendimento di politiche sim-to-real sicure e robuste
Un nuovo quadro chiamato LyEvO è stato sviluppato dai ricercatori per addestrare controllori che garantiscono sicurezza e affidabilità nelle simulazioni, valutando anche la loro idoneità per applicazioni nel mondo reale. Questo quadro fonde l'ottimizzazione evolutiva vincolata con il controllo statistico del modello (SMC) per la verifica, insieme a valutazioni di stabilità basate su Lyapunov. Utilizzando la conoscenza esistente della dinamica del sistema, identifica prima una regione di stabilità candidata, quindi perfeziona iterativamente questa regione ottimizzando e verificando statisticamente una politica utilizzando scenari operativi. Questo metodo completo stabilisce uno standard pratico per determinare la prontezza alla distribuzione. Il quadro è stato sottoposto a test rigorosi su benchmark Cartpole e 3D Quadrotor attraverso simulazioni e prove specifiche nel mondo reale. Affronta sfide significative nel trasferimento sim-to-real, fornendo un metodo strutturato per confermare sicurezza e robustezza prima della distribuzione. La ricerca è disponibile su arXiv con l'identificatore 2608.06481.
Fatti principali
- LyEvO combina l'ottimizzazione evolutiva vincolata e il controllo statistico del modello (SMC) con l'analisi di stabilità basata su Lyapunov.
- Il quadro utilizza l'analisi di Lyapunov per calcolare una regione di stabilità candidata iniziale.
- Un ciclo iterativo utilizza scenari operativi dalla regione di stabilità per ottimizzare congiuntamente e verificare statisticamente una politica.
- I confini della regione di stabilità vengono espansi in base ai risultati della verifica.
- LyEvO fornisce un criterio pratico per valutare la prontezza alla distribuzione.
- La valutazione è stata condotta su benchmark Cartpole e 3D Quadrotor.
- Il quadro è stato testato attraverso estese simulazioni e esperimenti mirati nel mondo reale.
- L'articolo è disponibile su arXiv con l'identificatore 2608.06481.
Entità
Istituzioni
- arXiv