Il modello AI V4 Pro di DeepSeek delude nei benchmark, eccelle nella cybersecurity
DeepSeek, una startup cinese di intelligenza artificiale, ha lanciato silenziosamente il suo modello di punta aggiornato, DeepSeek-V4-Pro-0813, che ha suscitato reazioni contrastanti. I ricercatori in settori specializzati come la cybersecurity trovano il modello degno di nota, ma le prime valutazioni di benchmark rivelano la sua incapacità di competere con i principali concorrenti, deludendo alcuni sviluppatori per quanto riguarda prestazioni e prezzo. Nell'Artificial Analysis Intelligence Index, DeepSeek-V4-Pro-0813 ha ottenuto un punteggio di 53, eguagliando il GLM-5.2 di Zhipu AI di giugno, ma mancando di quattro punti rispetto al GPT-5.6 Terra di OpenAI e di sette punti rispetto al Kimi K3 di Moonshot AI. Il Vals Index di Vals AI di San Francisco lo ha posizionato al 12° posto, dietro al GPT-5.5 di OpenAI e a sistemi avanzati come Kimi K3 e Claude Opus 5 di Anthropic. Vals AI ha sottolineato mercoledì che il modello ha avuto particolari difficoltà con compiti in un terminale sandbox e nella creazione di complessi modelli finanziari in Excel. Tuttavia, le sue prestazioni in cybersecurity rimangono un vantaggio noto mentre DeepSeek naviga nell'arena competitiva dell'IA contro entità affermate come OpenAI e Anthropic.
Fatti principali
- DeepSeek ha rilasciato DeepSeek-V4-Pro-0813, un modello di punta aggiornato.
- Il modello ha ottenuto un punteggio di 53 nell'Artificial Analysis Intelligence Index.
- Ha eguagliato il GLM-5.2 di Zhipu AI ma è rimasto indietro rispetto al GPT-5.6 Terra di OpenAI e al Kimi K3 di Moonshot AI.
- Nel Vals Index, si è classificato al 12° posto, dietro al GPT-5.5 e a modelli all'avanguardia come Kimi K3 e Claude Opus 5.
- Vals AI ha riportato difficoltà con compiti in terminale sandbox e modelli finanziari in Excel.
- Il modello ha impressionato i ricercatori nel campo della cybersecurity.
- Alcuni sviluppatori sono rimasti delusi dalle sue capacità complessive e dal prezzo.
- Il rilascio fa parte della competizione di DeepSeek con altre startup di IA.
Entità
Istituzioni
- DeepSeek
- Zhipu AI
- OpenAI
- Moonshot AI
- Vals AI
- Anthropic
- Artificial Analysis
Luoghi
- China
- San Francisco
- United States
- Beijing