Navigare
AI BENCHY
Advertise here

Granite 4.1 8B vs Mercury 2

Mercury 2 conduce la scorul mediu cu 4.6 vs 4.0. Granite 4.1 8B are costul de benchmark mai mic, $0.007 vs $0.030. Mercury 2 este mai rapid cu 829ms vs 1.45s, cu rate de reușită de 9.1% vs 22.7%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-28

Rang
#224
Total tokenuri de ieșire
5,996
Timp de răspuns (mediu)
1.45s
Cost total
$0.007
Rang
#211
Total tokenuri de ieșire
9,564
Timp de răspuns (mediu)
829ms
Cost total
$0.030
Model recomandat Mercury 2

Are cel mai bun scor aici (4.6) și răspunde de aproximativ 1.8x mai rapid decât Granite 4.1 8B.

Comparație detaliată

Metrică Granite 4.1 8B Granite 4.1 8B none Lansare: 2026-05-01 Mercury 2 Mercury 2 none Lansare: 2026-02-24
Scor 4.0 4.6
Rang #224 #211
Fiabilitate 10.0 10.0
Consistență 10.0 9.2
Teste corecte
Rată de trecere pe încercare 9.1% 22.7%
Teste instabile 0 2
Rulări totale 66 66
Cost per rezultat 0.315 0.734
Cost total $0.007 $0.030
Preț de intrare $0.050 / 1M $0.250 / 1M
Preț de ieșire $0.100 / 1M $0.750 / 1M
Total tokenuri de intrare 113,827 88,704
Tokenuri de ieșire 5,996 9,564
Tokenuri de raționament 0 0
Timp de răspuns (mediu) 1.45s 829ms
Timp de răspuns (maxim) 16.67s 4.52s
Timp de răspuns (total) 31.96s 18.24s

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#224 IBM: Granite 4.1 8B

none
Cost
$0.001
Timp
3.2s
Tokenuri
491 tok

#211 Mercury 2

none
Cost
$0.002
Timp
1.8s
Tokenuri
1,514 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.1 8B 4.5 10.0 0.0% 0 775ms 8,344 525 0
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0

Comparație rapidă

Schimbă perechea de comparație