Per la prima volta dopo molto tempo, un modello al di fuori di OpenAI si trova in cima alla classifica della benchmark di matematica MathArena. Si tratta di Gemini 4 Carbon di Google, che ha spodestato GPT-6.1 Sol di OpenAI dal primo posto. Al secondo posto si trova Claude Fable 5.2, che potrebbe essere uno dei modelli pubblicamente disponibili più potenti per compiti matematici.
I modelli OpenAI, che recentemente avrebbero risolto anche equazioni complesse come le equazioni di Navier-Stokes, non sono ancora disponibili. Il modello Gemini 4 Carbon presenta alcuni errori comuni, tra cui il superamento regolare del limite di tempo. Inoltre, il modello raramente abbandona un compito, una caratteristica che può essere valutata positivamente o negativamente a seconda della prospettiva. In un caso, il modello ha avviato uno script che ha eseguito per più di undici ore senza verificare il progresso.
Prestazioni e costi
La maggiore potenza di calcolo di Gemini 4 Carbon ha un prezzo: con le impostazioni di ragionamento utilizzate, i costi per Carbon e Fable 5.2 sono rispettivamente circa 15 e 40 volte superiori a quelli di GPT-6.1 Sol.
Classifica dei modelli
Ecco una panoramica dei modelli attualmente in testa alla classifica:
- #1 overall: Gemini 4 Carbon (high) di Google, rilasciato il 2026-11-10, con una performance attesa dell'85.4% ±3.0% e un costo di $15.70 ±$1.33.
- #2 overall: Claude-Fable-5.2 (max) di Anthropic, rilasciato il 2026-11-09, con una performance attesa dell'82.8% ±5.3% e un costo di $40.20 ±$2.59.
- #3 overall: GPT-6.1 Sol (max) di OpenAI, rilasciato il 2026-09-29, con una performance attesa dell'80.6% ±2.7% e un costo di $1.07 ±$0.018.
- Best open model: Kimi K3.1 Pro (max) di Moonshot AI, rilasciato il 2026-10-23, con una performance attesa del 54.3% ±5.8% e un costo di $3.70 ±$0.27.
Notizie sull'IA senza hype
Con l'abbonamento THE-DECODER, puoi leggere senza pubblicità e diventare parte della nostra community. Discuti nel sistema di commenti, ricevi il nostro newsletter settimanale sull'IA, 6 volte all'anno il newsletter "KI Radar" con le ultime novità dalla ricerca sull'IA, fino al 25% di sconto su eventi KI Pro e accesso all'archivio completo degli ultimi dieci anni.
Abbonati ora.