Navigare
Advertise here

Granite 4.2 8B (high) vs Mercury 2.5

Granite 4.2 8B (high) conduce la scorul mediu cu 4.6 vs 3.9. Mercury 2.5 are costul de benchmark mai mic, $0.016 vs $0.084. Mercury 2.5 este mai rapid cu 2.45s vs 235.89s, cu rate de reușită de 39.4% vs 25.8%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-08

Modele comparate

Rang
#293
Total tokenuri de ieșire
612,215
Timp de răspuns (mediu)
235.89s
Cost total
$0.084
Rang
#312
Total tokenuri de ieșire
71,143
Timp de răspuns (mediu)
2.45s
Cost total
$0.016
Model recomandat Mercury 2.5

Scorul rămâne aproape de cel mai bun scor de aici (3.9 vs 4.6) și costă de aproximativ 5.3x mai puțin decât Granite 4.2 8B (high).

Comparație detaliată

Metrică Granite 4.2 8B Granite 4.2 8B high Lansare: 2026-09-02 Mercury 2.5 Mercury 2.5 none Lansare: 2026-09-08
Scor 4.6 3.9
Rang #293 #312
Fiabilitate 7.6 10.0
Consistență 6.3 7.5
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 39.4% 25.8%
Teste instabile 10 7
Rulări totale 66 66
Cost per rezultat 2.085 0.782
Cost total $0.084 $0.016
Preț de intrare $0.100 / 1M $0.040 / 1M
Preț de ieșire $0.150 / 1M $0.150 / 1M
Total tokenuri de intrare 43,278 123,740
Tokenuri de ieșire 181,083 71,143
Tokenuri de raționament 431,132 0
Timp de răspuns (mediu) 235.89s 2.45s
Timp de răspuns (maxim) 685.87s 36.48s
Timp de răspuns (total) 5189.64s 53.83s
Parametri 8B ~100B
Disponibilitate Sursă deschisă Închis

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#293 IBM: Granite 4.2 8B

high
Provider returned error
Cost
$0.000
Timp
0.2s
Tokenuri
0 tok

#312 Mercury 2.5

none
Cost
$0.001
Timp
2.7s
Tokenuri
2,749 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Granite 4.2 8B 3.8 4.3 33.3% 2 515.34s 7,047 42,438 154,749
Mercury 2.5 3.7 7.0 22.2% 1 12.50s 7,888 61,297 0

Comparație rapidă

Schimbă perechea de comparație