CheckSupport: uno strumento LLM locale automatizza la selezione e il completamento delle checklist dei manoscritti
CheckSupport, un sistema open-source distribuibile localmente, è stato creato da ricercatori per automatizzare la proposta e la compilazione delle checklist di segnalazione per articoli scientifici utilizzando modelli linguistici di grandi dimensioni. Questo sistema utilizza un metodo di prompting a fasi per suddividere i processi di segnalazione in compiti di inferenza specifici, concentrandosi sull'estrazione accurata piuttosto che sulla generazione di testo. Tutti i compiti di inferenza vengono eseguiti localmente con modelli ottimizzati per le istruzioni, garantendo la privacy dei dati e facilitando flussi di lavoro riproducibili e verificabili. Testato su un insieme di manoscritti sottoposti a revisione paritaria, CheckSupport ha dimostrato un tasso di accuratezza del 90% per le raccomandazioni delle checklist e dell'88% per i completamenti a livello di singoli elementi. Lo strumento mira a migliorare la conformità alle linee guida per la segnalazione, che spesso soffrono di incongruenze manuali.
Fatti principali
- CheckSupport è un sistema open-source distribuibile localmente.
- Utilizza modelli linguistici di grandi dimensioni per automatizzare la raccomandazione e il completamento delle checklist.
- Impiega una strategia di prompting a fasi per compiti di inferenza vincolati.
- Tutta l'inferenza viene eseguita localmente per preservare la privacy dei dati.
- Ha raggiunto un'accuratezza del 90% per le raccomandazioni delle checklist.
- Ha raggiunto un'accuratezza dell'88% per i completamenti a livello di singoli elementi.
- Valutato su un corpus di manoscritti sottoposti a revisione paritaria.
- Mira a migliorare l'aderenza alle linee guida per la segnalazione.
Entità
—