Dimostratori di Teoremi basati su LLM non Rispettano le Simmetrie Strutturali
Un recente preprint su arXiv (2605.22257) dimostra che i dimostratori formali di teoremi che utilizzano grandi modelli linguistici (LLM) sono estremamente sensibili a piccole variazioni nella presentazione dei problemi, portando a significative discrepanze nei tassi di successo delle dimostrazioni per affermazioni semanticamente identiche. Ciò evidenzia una mancanza di aderenza alle simmetrie strutturali presenti nella matematica formale. Gli autori propongono un framework chiamato "categorie di riscrittura", radicato nella teoria delle categorie, che comprende le trasformazioni non invertibili indotte dalle tattiche di dimostrazione. All'interno di questo framework, definiscono due concetti: equivarianza della dimostrazione, che descrive come le distribuzioni delle dimostrazioni cambiano con le riscritture, e invarianza del successo, che impone che affermazioni equivalenti abbiano la stessa probabilità di soluzione. Notano che i dimostratori basati su stati e tattiche successive soddisfano intrinsecamente l'equivarianza della dimostrazione operando sugli stati di dimostrazione.
Fatti principali
- arXiv:2605.22257v1
- I dimostratori formali di teoremi basati su LLM sono sensibili a variazioni superficiali nella rappresentazione dei problemi
- Affermazioni semanticamente equivalenti possono avere tassi di successo drasticamente diversi
- L'articolo introduce le categorie di riscrittura, un framework basato sulla teoria delle categorie
- Le categorie di riscrittura catturano trasformazioni compositive, generalmente non invertibili, indotte dalle tattiche di dimostrazione
- Vengono formalizzate due nozioni di simmetria: equivarianza della dimostrazione e invarianza del successo
- L'equivarianza della dimostrazione governa come le distribuzioni delle dimostrazioni si trasformano sotto riscritture
- L'invarianza del successo richiede che affermazioni equivalenti siano risolte con la stessa probabilità
- I dimostratori basati su stati e tattiche successive soddisfano naturalmente l'equivarianza della dimostrazione
Entità
Istituzioni
- arXiv