E3: Revisione automatizzata della ricerca con backtesting a livello di problema

E3 è un assistente di revisione automatizzato progettato per migliorare il lavoro dei revisori e dei team di ingegneria, individuando i problemi tecnici chiave negli articoli di ricerca. Specifica per ogni problema il tipo, la posizione, la rilevanza per il contributo e l'analisi o le prove necessarie per la risoluzione, affrontando affermazioni non supportate, ablazioni assenti, baseline inadeguate, assunzioni nascoste, minacce alla validità e rischi di leakage. Per valutare E3 senza introdurre bias di contaminazione, viene implementato un protocollo di backtesting focalizzato sull'analisi a livello di problema: il dataset è limitato agli articoli pubblicati dopo il cutoff di addestramento di tutte le fonti automatizzate. Un meta-giudice, che vede solo revisioni anonimizzate, classifica ogni coppia problema-fonte come Catturato, Parziale o Mancato. Questo metodo è stato testato su 100 articoli ICLR 2026 e 4.598 righe di problemi valutati, confrontando E3 con revisioni umane di ICLR e due baseline LLM appaiate per prompt basate su gpt-5.4 di OpenAI e claude-opus-4-6 di Anthropic.