FinDeepIndicator: Nuovo Benchmark per Agenti di Ricerca Approfondita nella Costruzione di Indicatori Finanziari
È stato introdotto un nuovo benchmark, FinDeepIndicator, per valutare gli agenti di Deep Research (DR) nella costruzione end-to-end di indicatori finanziari. A differenza dei benchmark esistenti che si concentrano sull'accuratezza a livello di risposta e presuppongono che i dati siano forniti, FinDeepIndicator valuta l'intero processo intermedio. Copre quattro fasi: specifica della formula, raccolta dati, calcolo dell'indicatore e generazione della risposta. Il benchmark include indicatori fondamentali, tecnici e macroeconomici, organizzati in 21 sottocategorie granulari, e contiene 3.350 coppie domanda-risposta (QA) curate, derivate da dati statunitensi. Questa iniziativa colma una lacuna nella valutazione del processo di costruzione degli indicatori, che è cruciale per la valutazione, la valutazione del rischio e l'analisi economica. Il benchmark è descritto in un articolo disponibile su arXiv (arXiv:2608.00764).
Fatti principali
- FinDeepIndicator è il primo benchmark dedicato alla valutazione degli agenti di Deep Research (DR) nella costruzione end-to-end di indicatori finanziari.
- Valuta gli agenti DR in quattro fasi: specifica della formula, raccolta dati, calcolo dell'indicatore e generazione della risposta.
- Il benchmark copre indicatori fondamentali, tecnici e macroeconomici.
- Gli indicatori sono organizzati in 21 sottocategorie granulari.
- Contiene 3.350 coppie domanda-risposta (QA) curate.
- Le coppie QA sono derivate da dati statunitensi.
- I benchmark esistenti si concentrano sull'accuratezza a livello di risposta e presuppongono che i dati siano forniti.
- Il benchmark è presentato in un articolo su arXiv con identificativo 2608.00764.
Entità
Istituzioni
- arXiv
Luoghi
- United States