IA guidata dai muscoli controlla mani che suonano il piano

Un innovativo metodo data-centrico consente il controllo abile di mani muscoloscheletriche, permettendo performance pianistiche accurate su nuove composizioni al di fuori del dataset di riferimento esistente. Questo quadro gerarchico integra la gestione muscolare ad alta frequenza con il coordinamento a bassa frequenza nello spazio latente. L'apprendimento per rinforzo viene impiegato per addestrare politiche di basso livello, che producono attivazioni dinamiche muscolo-tendinee aderendo a traiettorie da un ampio dataset di movimento di riferimento. Queste politiche vengono trasformate in modelli di autoencoder variazionale (VAE), risultando in spazi latenti fluidi che semplificano le dinamiche muscolari di basso livello. Politiche di alto livello specifiche per brani funzionano all'interno di questo spazio latente per sincronizzare i movimenti bimanuali secondo eventi di nota derivati da spartiti musicali.