SMDD-Bench: Benchmark per Agenti LLM nella Progettazione di Farmaci
SMDD-Bench è stato lanciato da ricercatori come benchmark per valutare gli agenti LLM in sfide pratiche di progettazione di piccole molecole farmaceutiche. Questo benchmark presenta 502 istanze di compiti garantiti risolvibili, categorizzati in cinque tipi distinti: Scaffold Hopping, Identificazione di Farmacofori 2D, Scoperta di Punti di Interazione, Ottimizzazione del Lead e Assemblaggio di Frammenti. Copre un ampio spazio chimico e include 102 diversi target proteici. Affrontare con successo il benchmark richiede un robusto ragionamento in chimica e biologia, insieme a una solida comprensione dei concetti 3D.
Fatti principali
- SMDD-Bench è un benchmark agentico multi-turno e a lungo orizzonte per agenti LLM.
- Consiste in 502 istanze di compiti suddivise in 5 tipi di compiti.
- I compiti coinvolgono 102 target proteici unici.
- Il benchmark copre Identificazione di Farmacofori 2D, Scoperta di Punti di Interazione, Scaffold Hopping, Ottimizzazione del Lead e Assemblaggio di Frammenti.
- Tutti i compiti sono garantiti risolvibili.
- Il benchmark mira a standardizzare la valutazione degli agenti LLM nella progettazione di piccole molecole farmaceutiche.
- Gli attuali metodi di valutazione sono ad hoc, troppo semplici, limitati in scala o a turno singolo.
- Risolvere il benchmark richiede ragionamento chimico e biologico e intuizione 3D.
Entità
Istituzioni
- arXiv