Il prompting dei LLM recupera le PHI specifiche dell'istituto mancate dai sistemi di de-identificazione
Uno studio pubblicato su arXiv (identificativo 2608.17051) esamina le sfide della privacy dei dati sanitari, evidenziando le inadeguatezze degli attuali sistemi di de-identificazione nel riconoscere le informazioni sanitarie protette (PHI) specifiche dell'istituzione. Questa limitazione ostacola l'utilizzo secondario delle cartelle cliniche elettroniche. I ricercatori studiano il potenziale dei grandi modelli linguistici (LLM) che utilizzano l'apprendimento contestuale (ICL) per affrontare questo problema. Hanno valutato otto LLM utilizzando 100 note annotate di oncologia pediatrica del Texas Children's Hospital, confrontando le loro prestazioni con Stanford TiDE, OpenMed PII e vari metodi basati su pattern. La valutazione ha comportato tre condizioni di prompt e 14 configurazioni confrontate con il miglior risultato a prompt singolo. I risultati indicano che gli LLM possono recuperare le PHI specifiche dell'istituzione mancate, migliorando così l'utilità dei dati mantenendo la privacy. L'articolo è accessibile come preprint arXiv.
Fatti principali
- I sistemi di de-identificazione esistenti non rilevano le PHI contestuali all'istituzione come abbreviazioni ospedaliere, nomi di edifici e codici interni.
- Lo studio ha utilizzato 100 note annotate di oncologia pediatrica con 5.322 intervalli di PHI del Texas Children's Hospital.
- Otto LLM sono stati confrontati con Stanford TiDE, OpenMed PII e due baseline basate su pattern.
- Ogni LLM è stato testato con tre prompt di specificità crescente.
- I tre prompt erano una baseline allineata all'HIPAA, la baseline più le categorie di PHI istituzionali mancate e un prompt aggiuntivo per evitare un sovra-oscuramento.
- 14 configurazioni multi-agente e ensemble sono state confrontate con il miglior prompt singolo.
- L'articolo mira a controllare il trade-off tra precisione e richiamo utilizzando LLM con apprendimento contestuale.
- La ricerca è pubblicata come preprint arXiv 2608.17051.
Entità
Istituzioni
- Texas Children's Hospital
Luoghi
- Texas