Ricordare Catastrofico: Perché i Prompt di Codifica IA come CLAUDE.md Crescono Senza Limiti
Un nuovo articolo su arXiv (2608.11095) identifica un fenomeno chiamato 'ricordare catastrofico' nei sistemi di codifica agentici, dove file di istruzioni come CLAUDE.md crescono senza limiti nei repository reali. Lo studio, basato su 247.694 cicli di vita di istruzioni in 1.867 repository, rileva che i prompt più che triplicano nel corso della loro vita (+226%), guadagnando in media 4,9 istruzioni nette per commit. La causa principale è il richiamo imperfetto: aggiungere un'istruzione è economico, ma eliminarne una senza rischiare regressioni di correttezza costa O(2^|D|) in un prompt di |D| istruzioni. L'articolo mostra anche che i commenti nei prompt possono fermare la crescita, e invertendo IFEval si ottengono risultati verificabili. Questo lavoro è l'inverso del dimenticare catastrofico nell'apprendimento continuo, evidenziando una nuova sfida per la codifica assistita dall'IA.
Fatti principali
- Articolo arXiv:2608.11095, annunciato come nuovo.
- Lo studio ha analizzato 247.694 cicli di vita di istruzioni in 1.867 repository.
- I prompt agentici crescono senza limiti, triplicando nel corso della vita (+226%).
- Guadagno medio netto di 4,9 istruzioni per commit.
- Le istruzioni più vecchie hanno meno probabilità di essere eliminate (log-hazard -0,032/commit).
- Il costo di eliminazione è O(2^|D|) in un prompt di |D| istruzioni.
- I commenti nei prompt possono fermare la crescita.
- Invertire IFEval produce risultati verificabili.
Entità
Istituzioni
- arXiv