Navigare
AI BENCHY
Advertise here

AI BENCHY Compare

Nemotron 3 Ultra 550b A55b vs OpenAI: GPT-5.3-Codex

Rezumat

Comparație benchmark Nemotron 3 Ultra 550b A55b (medium) vs GPT-5.3-Codex (medium): GPT-5.3-Codex (medium) conduce la scorul mediu cu 8.9 vs 8.1. Nemotron 3 Ultra 550b A55b (medium) are costul de benchmark mai mic, $0.158 vs $0.740. Nemotron 3 Ultra 550b A55b (medium) este mai rapid cu 15.05s vs 16.22s, cu rate de reușită de 69.8% vs 82.5%.

Model recomandat: Nemotron 3 Ultra 550b A55b (medium) - Oferă cel mai bun compromis per total: scor competitiv (8.1), cost mai mic decât GPT-5.3-Codex (medium) și timp de răspuns echilibrat.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-09

Metrică Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Lansare: 2026-06-04 Disponibil gratuit GPT-5.3-Codex GPT-5.3-Codex medium Lansare: 2026-02-05
Scor 8.1 8.9
Rang #31 #13
Fiabilitate 9.7 10.0
Consistență 8.8 8.5
Teste corecte
Rată de trecere pe încercare 69.8% 82.5%
Teste instabile 3 4
Rulări totale 63 63
Cost per rezultat 0.000 4.932
Cost total $0.158 $0.740
Preț de intrare $0.500 / 1M $1.750 / 1M
Preț de ieșire $2.200 / 1M $14.000 / 1M
Total tokenuri de intrare 46,813 34,299
Tokenuri de ieșire 18,002 2,357
Tokenuri de raționament 53,091 46,189
Timp de răspuns (mediu) 15.05s 16.22s
Timp de răspuns (maxim) 43.93s 100.93s
Timp de răspuns (total) 316.09s 340.67s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#31 Nemotron 3 Ultra 550b A55b

medium
SVG invalid
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

#13 GPT-5.3-Codex

medium
Cost
$0.049
Timp
54.9s
Tokenuri
3,580 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Trucuri anti-AI Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
GPT-5.3-Codex 8.7 7.9 91.7% 1 4.16s 606 240 1,722
Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
GPT-5.3-Codex 10.0 10.0 100.0% 0 19.50s 7,302 535 10,890
Combinat Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
GPT-5.3-Codex 10.0 10.0 100.0% 0 19.56s 11,019 364 2,731
Parsare și extragere de date Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
GPT-5.3-Codex 10.0 10.0 100.0% 0 3.07s 7,140 234 728
Specific domeniului Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
GPT-5.3-Codex 5.9 7.2 55.6% 1 64.31s 813 64 25,308
Inteligență generală Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
GPT-5.3-Codex 4.6 10.0 0.0% 0 4.87s 477 187 331
Respectarea instrucțiunilor Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
GPT-5.3-Codex 10.0 10.0 100.0% 0 3.04s 660 93 693
Rezolvare de puzzle-uri Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
GPT-5.3-Codex 9.0 7.9 88.9% 1 5.05s 642 356 1,593
Apelare instrumente Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
GPT-5.3-Codex 10.0 10.0 100.0% 0 6.37s 5,445 254 492
Cultură generală Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240
GPT-5.3-Codex 2.8 1.6 33.3% 1 14.43s 195 30 1,701

Comparație rapidă

Schimbă perechea de comparație