Il Modello CodeMMR Unifica il Recupero di Linguaggio Naturale, Codice e Immagini per l'Ingegneria del Software

È stato lanciato un nuovo benchmark chiamato MMCoIR per valutare il recupero di informazioni sul codice multimodale, coprendo cinque domini visivi, otto linguaggi di programmazione e undici librerie. Questo benchmark sottolinea le sfide dell'integrazione di strutture visive e di programmazione nei sistemi di recupero. Per affrontarle, i ricercatori hanno sviluppato CodeMMR, un modello di recupero versatile che combina linguaggio naturale, codice e immagini in un quadro semantico unificato. Grazie al suo allineamento multimodale basato su istruzioni, il modello mostra un'eccellente adattabilità tra diverse modalità. La ricerca di codice svolge un ruolo vitale nell'ingegneria del software moderna, migliorando la scoperta e il riutilizzo del codice mentre aumenta l'affidabilità con i grandi modelli linguistici. I tradizionali modelli di recupero spesso trascurano i componenti visivi negli artefatti di programmazione, come interfacce web e diagrammi. La ricerca evidenzia l'efficacia del modello, dettagliata nella prestampa arXiv:2604.15663v1, mostrando un approccio interdisciplinare.