Navigare
AI BENCHY
Advertise here

AI BENCHY Compare

Nemotron 3 Ultra 550b A55b vs OpenAI: GPT-4o-mini

Rezumat

Comparație benchmark Nemotron 3 Ultra 550b A55b vs GPT-4o-mini: Nemotron 3 Ultra 550b A55b conduce la scorul mediu cu 8.1 vs 5.0. GPT-4o-mini are costul de benchmark mai mic, $0.006 vs $0.158. GPT-4o-mini este mai rapid cu 1.77s vs 15.05s, cu rate de reușită de 69.8% vs 23.8%.

Model recomandat: Nemotron 3 Ultra 550b A55b - Are cel mai puternic scor din această comparație (8.1) și cel mai bun echilibru între cost și timp de răspuns dintre toate cele 2 modele.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-02

Metrică Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Lansare: 2026-06-04 Disponibil gratuit GPT-4o-mini GPT-4o-mini none Lansare: 2024-07-18
Scor 8.1 5.0
Rang #26 #144
Fiabilitate 9.7 10.0
Consistență 8.8 9.9
Teste corecte
Rată de trecere pe încercare 69.8% 23.8%
Teste instabile 3 0
Rulări totale 63 63
Cost per rezultat 0.000 0.119
Cost total $0.158 $0.006
Preț de intrare $0.500 / 1M $0.150 / 1M
Preț de ieșire $2.200 / 1M $0.600 / 1M
Total tokenuri de intrare 46,813 31,518
Tokenuri de ieșire 18,002 1,982
Tokenuri de raționament 53,091 0
Timp de răspuns (mediu) 15.05s 1.77s
Timp de răspuns (maxim) 43.93s 7.58s
Timp de răspuns (total) 316.09s 24.80s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#26 Nemotron 3 Ultra 550b A55b

medium
SVG invalid
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

#144 GPT-4o-mini

none
Cost
$0.001
Timp
6.6s
Tokenuri
742 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Trucuri anti-AI Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
GPT-4o-mini 4.8 10.0 25.0% 0 1.34s 618 186 0
Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
GPT-4o-mini 3.2 9.6 0.0% 0 1.63s 7,314 367 0
Combinat Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
GPT-4o-mini 3.0 10.0 0.0% 0 7.58s 8,298 568 0
Parsare și extragere de date Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
GPT-4o-mini 10.0 10.0 100.0% 0 1.27s 7,161 183 0
Specific domeniului Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
GPT-4o-mini 3.0 10.0 0.0% 0 637ms 732 15 0
Inteligență generală Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
GPT-4o-mini 4.0 10.0 0.0% 0 909ms 480 66 0
Respectarea instrucțiunilor Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
GPT-4o-mini 6.3 10.0 50.0% 0 1.11s 666 69 0
Rezolvare de puzzle-uri Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
GPT-4o-mini 3.5 10.0 0.0% 0 1.21s 651 308 0
Apelare instrumente Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
GPT-4o-mini 10.0 10.0 100.0% 0 2.51s 5,400 205 0
Cultură generală Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240
GPT-4o-mini 3.0 10.0 0.0% 0 794ms 198 15 0

Comparație rapidă

Schimbă perechea de comparație