ByteDance Addestra un Modello AI da 10 Trilioni di Parametri per Competere con Anthropic

ByteDance, l'importante azienda tecnologica cinese, sta sviluppando un vasto modello AI che potrebbe raggiungere fino a 10 trilioni di parametri, triplicando potenzialmente le dimensioni di Kimi K3, attualmente il più grande modello rilasciato in Cina. Questa iniziativa riflette l'obiettivo della Cina non solo di raggiungere ma anche di superare i laboratori americani nel campo dell'AI avanzata. Il modello è attualmente nella fase iniziale di pre-addestramento, che generalmente dura dai tre ai sei mesi prima di essere sottoposto a messa a punto e possibile rilascio. La dimensione finale sarà confermata in seguito. Sebbene Anthropic non riveli le dimensioni specifiche dei modelli, le stime suggeriscono che il suo modello di punta Mythos 5 abbia circa 8 trilioni di parametri, con Fable 5 a circa 5 trilioni. Il numero di parametri indica i limiti di capacità, ma le prestazioni effettive dipendono dalla qualità dei dati e dalle tecniche di addestramento. I modelli recenti di Moonshot e Alibaba hanno dimostrato risultati impressionanti nei benchmark, superati solo da Fable 5 di Anthropic in alcune metriche. Dopo un divieto temporaneo a giugno a causa di problemi di sicurezza, Mythos 5 è ora accessibile solo a organizzazioni autorizzate. Esperti del settore indicano che diversi laboratori cinesi stanno lavorando a modelli paragonabili a Fable 5, con ByteDance che mira notevolmente alla scala più grande.