Navigare
AI BENCHY
Advertise here

AI BENCHY Compare

IBM: Granite 4.1 8B vs Nemotron 3 Ultra 550b A55b

Rezumat

Comparație benchmark Granite 4.1 8B vs Nemotron 3 Ultra 550b A55b: Nemotron 3 Ultra 550b A55b conduce la scorul mediu cu 8.1 vs 4.0. Granite 4.1 8B are costul de benchmark mai mic, $0.003 vs $0.177. Granite 4.1 8B este mai rapid cu 728ms vs 15.05s, cu rate de reușită de 9.5% vs 69.8%.

Model recomandat: Granite 4.1 8B - Oferă cel mai bun compromis per total: scor competitiv (4.0), cost mai mic decât Nemotron 3 Ultra 550b A55b și timp de răspuns echilibrat.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-06-12

Metrică Granite 4.1 8B Granite 4.1 8B none Lansare: 2026-05-01 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Lansare: 2026-06-04 Disponibil gratuit
Scor 4.0 8.1
Rang #163 #29
Fiabilitate 10.0 9.7
Consistență 10.0 8.8
Teste corecte
Rată de trecere pe încercare 9.5% 69.8%
Teste instabile 0 3
Rulări totale 63 63
Cost per rezultat 0.131 0.000
Cost total $0.003 $0.177
Preț de intrare $0.050 / 1M $0.500 / 1M
Preț de ieșire $0.100 / 1M $2.500 / 1M
Total tokenuri de intrare 46,285 46,813
Tokenuri de ieșire 2,911 18,002
Tokenuri de raționament 0 53,091
Timp de răspuns (mediu) 728ms 15.05s
Timp de răspuns (maxim) 2.17s 43.93s
Timp de răspuns (total) 15.29s 316.09s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#163 IBM: Granite 4.1 8B

none
Cost
$0.001
Time
3.2s
Tokens
491 tok

#29 Nemotron 3 Ultra 550b A55b

medium
No showcase result has been generated for this model yet.
Cost
$0.000
Time
-
Tokens
0 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Trucuri anti-AI Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 4.9 10.0 25.0% 0 844ms 645 903 0
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 4.5 10.0 0.0% 0 775ms 8,344 525 0
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
Combinat Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 3.0 10.0 0.0% 0 1.88s 19,089 396 0
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
Parsare și extragere de date Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 3.0 10.0 0.0% 0 575ms 7,617 195 0
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
Specific domeniului Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 3.0 10.0 0.0% 0 357ms 768 24 0
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
Inteligență generală Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 4.0 10.0 0.0% 0 499ms 528 115 0
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
Respectarea instrucțiunilor Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 3.6 9.9 0.0% 0 344ms 687 66 0
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
Rezolvare de puzzle-uri Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 3.2 10.0 0.0% 0 608ms 672 432 0
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
Apelare instrumente Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 10.0 10.0 100.0% 0 2.17s 7,719 243 0
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
Cultură generală Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 3.0 10.0 0.0% 0 306ms 216 12 0
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240

Comparație rapidă

Schimbă perechea de comparație