Agenti di codifica basati su LLM consentono la sintesi di sistemi just-in-time
I ricercatori propongono i sistemi Just-in-Time (JIT), un nuovo approccio in cui interi sistemi vengono sintetizzati da zero utilizzando agenti di codifica basati su LLM, specializzati per ambiente, carico di lavoro e proprietà richieste. Presentano Jitskit, una pipeline che perfeziona iterativamente le implementazioni del sistema rispetto a suite di test di valutazione in evoluzione. Jitskit sintetizza archivi chiave-valore da schede specifiche che coprono carichi di lavoro YCSB, vincoli di distribuzione e proprietà del sistema. I sistemi sintetizzati superano i sistemi all'avanguardia in tutti i 18 specifiche testate, ottenendo un'accelerazione fino a 4,6 volte. Ciò sfida il modello tradizionale di costruire sistemi per uso generale in anni, suggerendo un cambiamento verso la generazione di sistemi specializzati su richiesta.
Fatti principali
- I sistemi JIT sono sintetizzati da zero utilizzando agenti di codifica basati su LLM.
- Jitskit è una pipeline per sintetizzare archivi chiave-valore da schede specifiche.
- Le schede specifiche coprono carichi di lavoro YCSB, risorse di calcolo, consistenza e durabilità.
- Jitskit perfeziona iterativamente le implementazioni rispetto a una suite di test di valutazione in evoluzione.
- I sistemi sintetizzati superano i sistemi all'avanguardia in 18 specifiche su 18.
- Miglioramento delle prestazioni fino a 4,6 volte rispetto a sistemi comparabili.
- I sistemi tradizionali richiedono anni per essere costruiti e comportano costi di prestazione per la generalità.
- L'approccio è reso trattabile dagli agenti di codifica basati su LLM.
Entità
—