EarlyDx: Nuovo Benchmark per la Diagnosi Aperta in Pronto Soccorso dai Dati di Ammissione
Un team di ricercatori ha introdotto EarlyDx, un nuovo benchmark progettato per migliorare la diagnosi precoce nei pronto soccorso, basato su dati di 154.834 casi in MIMIC-IV. A differenza dei benchmark tipici che limitano le previsioni a codici specifici e ignorano le note in testo libero, EarlyDx utilizza solo le informazioni disponibili al momento dell'ammissione, basandosi sulle diagnosi effettuate durante la visita in pronto soccorso. Un revisore LLM valuta ogni etichetta in testo libero come completamente supportata, parzialmente supportata o non supportata, concentrandosi principalmente sulle etichette completamente supportate per la valutazione. Lo studio ha rivelato che nessun sistema valutato—sia generale, specifico per la medicina o post-addestrato—è riuscito a generare in modo coerente una diagnosi completamente supportata per ogni caso. La ricerca è disponibile su arXiv con identificativo 2607.28788.
Fatti principali
- EarlyDx è un benchmark per la diagnosi precoce aperta nei pronto soccorso.
- È costruito da 154.834 visite in pronto soccorso in MIMIC-IV.
- Ogni visita è limitata ai record disponibili al momento dell'ammissione.
- La supervisione utilizza le diagnosi registrate durante la visita in pronto soccorso, non le diagnosi di dimissione.
- Un revisore LLM verifica le etichette in testo libero come supportate, parzialmente supportate o non supportate.
- La valutazione primaria considera solo le etichette completamente supportate.
- Nessun sistema valutato ha sintetizzato una diagnosi completamente supportata per tutti i casi.
- Lo studio è disponibile su arXiv con identificativo 2607.28788.
Entità
Istituzioni
- arXiv