ObsDriveBench: Benchmarking della Comprensione Multimodale in Condizioni Meteorologiche Avverse
ObsDriveBench è stato lanciato da ricercatori come un benchmark multimodale pratico volto a valutare i modelli visione-linguaggio per la guida autonoma in scenari meteorologici difficili, tra cui nebbia, pioggia, neve e scarsa illuminazione. Questo benchmark affronta il problema della ridotta osservabilità ambientale, dove i dati multimodali possono diventare inaffidabili e incoerenti tra diverse modalità. Comprende tre dimensioni chiave: consapevolezza dell'osservabilità, affidabilità spaziale e processo decisionale consapevole del rischio, consentendo un'analisi dettagliata delle prestazioni del modello. Lo studio sottolinea che gli attuali benchmark si concentrano principalmente su condizioni ideali, distorsioni sintetiche o modalità singole, creando una mancanza di comprensione su come i modelli si comportano in condizioni meteorologiche avverse reali con input multimodali. L'obiettivo è migliorare la sicurezza nella guida autonoma valutando la comprensione della scena e il processo decisionale in condizioni compromesse.
Fatti principali
- ObsDriveBench è un benchmark multimodale reale per la guida autonoma in condizioni meteorologiche avverse.
- Valuta i modelli visione-linguaggio in condizioni di nebbia, pioggia, neve e scarsa illuminazione.
- Il benchmark ha tre dimensioni di capacità: consapevolezza dell'osservabilità, affidabilità spaziale e processo decisionale consapevole del rischio.
- I benchmark esistenti valutano principalmente in condizioni standard, con corruzioni sintetiche o modalità singola.
- L'osservabilità ambientale degradata rende le osservazioni multimodali inaffidabili e incoerenti tra le modalità.
- Il benchmark consente una diagnosi dettagliata del comportamento del modello in condizioni di osservabilità degradata.
- La ricerca è pubblicata su arXiv con ID 2607.23537.
- L'obiettivo è migliorare la comprensione della scena e il processo decisionale per la guida autonoma in condizioni meteorologiche avverse.
Entità
Istituzioni
- arXiv