ResidencyRL: Apprendimento per Rinforzo per l'IA Clinica in Ambienti Simulati
Un nuovo preprint su arXiv introduce ResidencyRL, un metodo di apprendimento per rinforzo (RL) progettato per addestrare agenti di intelligenza artificiale (IA) clinica attraverso incontri simulati con pazienti multi-turno. Il metodo affronta una lacuna nell'IA medica: mentre i grandi modelli linguistici (LLM) performano bene su benchmark statici, l'ottimizzazione dell'intera sequenza di decisioni cliniche rimane sottosviluppata. ResidencyRL abbina un agente politico a simulatori LLM che possono esibire comportamenti complessi e avversari, addestrando contro una ricompensa strutturata allineata all'accuratezza diagnostica. Ogni traiettoria di addestramento può includere fino a 60 turni di dialogo e 8 chiamate a strumenti. L'approccio trae un'analogia con la residenza medica, dove i medici convertono la conoscenza accademica in competenza clinica attraverso anni di formazione in migliaia di incontri con feedback diversificati e autonomia progressivamente maggiore. L'articolo, identificato come arXiv:2608.07418v1, è stato annunciato come un nuovo tipo sul server di preprint arXiv. Il metodo è presentato come un modo per migliorare il ragionamento clinico, che si basa su incontri con pazienti che coinvolgono anamnesi, raffinamento delle ipotesi diagnostiche e decisioni di gestione in condizioni di incertezza.
Fatti principali
- ResidencyRL è un metodo di apprendimento per rinforzo per addestrare agenti di IA clinica.
- Utilizza incontri clinici simulati multi-turno con fino a 60 turni di dialogo e 8 chiamate a strumenti per traiettoria.
- L'agente politico è abbinato a simulatori LLM capaci di comportamenti complessi e avversari.
- L'addestramento utilizza una ricompensa strutturata allineata all'accuratezza diagnostica.
- Il metodo affronta il divario tra benchmark medici statici e ottimizzazione dell'intera sequenza di decisioni cliniche.
- L'articolo è disponibile su arXiv con identificatore 2608.07418v1.
- L'approccio è ispirato alla formazione di residenza medica.
- Il metodo mira a migliorare il ragionamento clinico nell'IA.
Entità
Istituzioni
- arXiv