OncoTriad-QA: Un Nuovo Benchmark per il Ragionamento Multimodale Pan-Cancro
OncoTriad-QA rappresenta un notevole passo avanti nel modo in cui valutiamo i grandi modelli linguistici medici (LLM) e i modelli visione-linguaggio (VLM) per l'oncologia a livello del paziente. Si distingue integrando dati provenienti da radiologia, patologia, genomica e metadati clinici, colmando una lacuna presente nei benchmark attuali che di solito si concentrano su aree individuali. Questo benchmark include 86.1k domande semantiche da 9.281 casi di pazienti TCGA in 32 tipi di cancro. Riunisce informazioni da scansioni TC/RM, istopatologia a sezione intera, mutazioni genetiche, variazioni del numero di copie, metilazione del DNA, sequenziamento dell'RNA in massa e dati clinici. Le annotazioni sono create attraverso un pipeline basato su fonti che sfrutta etichette curate, referti diagnostici e informazioni molecolari, con l'obiettivo di valutare il ragionamento pan-cancro per applicazioni di IA medica.
Fatti principali
- OncoTriad-QA è un benchmark a livello di paziente per il question answering pan-cancro che integra radiologia, patologia e genomica.
- Contiene 86.1k domande semantiche su 9.281 casi di pazienti TCGA provenienti da 32 coorti di cancro.
- Il benchmark allinea radiologia TC/RM, istopatologia a sezione intera, mutazioni somatiche, alterazioni del numero di copie, metilazione del DNA, RNA-seq in massa e metadati clinici.
- Le annotazioni sono costruite attraverso un pipeline assistito da LLM basato su fonti, utilizzando etichette curate, referti diagnostici, profili molecolari e prove derivate dalle modalità.
- La maggior parte dei benchmark per LLM e VLM medici si concentra su modalità isolate o compiti ristretti immagine-testo, lasciando non testata la valutazione oncologica a livello di paziente.
- Il benchmark è introdotto per colmare la lacuna nella valutazione dell'oncologia a livello di paziente attraverso molteplici flussi di evidenze.
- La fonte è un articolo arXiv con ID 2608.02615.
- L'articolo è annunciato come una sottomissione di tipo incrociato.
Entità
Istituzioni
- arXiv
- TCGA