Allineamento delle Politiche al Momento dell'Inferenza per un Apprendimento per Rinforzo Equo

Un nuovo articolo arXiv (2608.00175v1) introduce un metodo per allineare le politiche di apprendimento per rinforzo (RL) pre-addestrate con obiettivi di equità al momento dell'inferenza, senza aggiornare i parametri della politica di base. L'approccio, ispirato all'allineamento al momento dell'inferenza nei modelli linguistici di grandi dimensioni, formalizza l'allineamento dell'equità come un problema di modellamento della politica e propone un quadro di modellamento moltiplicativo della politica che aggiusta le probabilità delle azioni per soddisfare criteri di equità basati sul benessere. Questo affronta la rigidità delle politiche RL che sono ottimizzate per ricompense scalari e non possono accogliere preferenze degli stakeholder precedentemente sconosciute. Gli approcci di equità esistenti richiedono un riaddestramento completo sotto una metrica orientata all'equità, che è costoso e presuppone che le preferenze siano note a priori. Il metodo proposto consente di guidare una politica pre-addestrata verso obiettivi di equità al volo, rendendola adattabile a nuovi criteri di prestazione. L'articolo è disponibile su arXiv ed è stato annunciato come una sottomissione di tipo cross.