Studio arXiv sulla ricerca ibrida sparsa-densa per documenti finanziari

Un nuovo articolo arXiv (2608.00183) indaga la ricerca ibrida sparsa-densa per la ricerca di documenti finanziari, concentrandosi sul benchmark FinDER di domande annotate da esperti su documenti 10-K aziendali. Lo studio identifica un difetto metodologico: quando l'unità di recupero supera la finestra di input dell'encoder denso, il modello denso perde una parte significativa delle prove etichettate, distorcendo i confronti con i baseline sparsi a testo completo. Segmentando il corpus in finestre delle dimensioni dell'encoder, i ricercatori hanno corretto questo problema. Sul corpus corretto, la fusione di BM25 con un encoder denso compatto ha migliorato il Hit@10 a livello di riferimento di circa il 28% rispetto a ciascun componente da solo. Inoltre, la fusione a rango reciproco senza training ha superato la miscela a pesi uguali in un confronto esplorativo. L'articolo esplora poi se la selezione del peso di fusione per query aiuti, utilizzando un oracolo sul... (troncato per brevità). Lo studio contribuisce a migliorare l'accuratezza del recupero nella ricerca di documenti finanziari, un dominio caratterizzato da query brevi e ricche di acronimi e documenti lunghi e densi di tabelle.