Navigare
AI BENCHY
Advertise here

Mercury 2 (medium) vs Grok 4.20 (medium)

Scorul mediu este practic egal la 7.0 vs 7.0. Mercury 2 (medium) are costul de benchmark mai mic, $0.094 vs $0.805. Mercury 2 (medium) este mai rapid cu 2.95s vs 32.56s, cu rate de reușită de 53.0% vs 60.6%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-02

Rang
#131
Total tokenuri de ieșire
87,554
Timp de răspuns (mediu)
2.95s
Cost total
$0.094
Rang
#132
Total tokenuri de ieșire
270,259
Timp de răspuns (mediu)
32.56s
Cost total
$0.805
Model recomandat Mercury 2 (medium)

Are cel mai bun scor aici (7.0) și costă de aproximativ 8.6x mai puțin decât Grok 4.20 (medium).

Comparație detaliată

Metrică Mercury 2 Mercury 2 medium Lansare: 2026-02-24 Grok 4.20 Grok 4.20 medium Lansare: 2026-03-31
Scor 7.0 7.0
Rang #131 #132
Fiabilitate 10.0 10.0
Consistență 8.4 8.2
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 53.0% 60.6%
Teste instabile 4 5
Rulări totale 66 66
Cost per rezultat 0.933 10.365
Cost total $0.094 $0.805
Preț de intrare $0.250 / 1M $1.250 / 1M
Preț de ieșire $0.750 / 1M $2.500 / 1M
Total tokenuri de intrare 110,515 102,986
Tokenuri de ieșire 10,325 5,860
Tokenuri de raționament 77,229 264,399
Timp de răspuns (mediu) 2.95s 32.56s
Timp de răspuns (maxim) 14.63s 199.66s
Timp de răspuns (total) 61.89s 716.36s
Parametri ~100B ~1T în total (~100B activi)
Disponibilitate Închis Închis

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#131 Mercury 2

medium
Cost
$0.002
Timp
2.1s
Tokenuri
1,702 tok

#132 SpaceXAI: Grok 4.20

medium
Cost
$0.041
Timp
110.3s
Tokenuri
16,336 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Mercury 2 8.2 7.7 77.8% 1 2.04s 7,065 296 11,328
Grok 4.20 6.3 6.6 55.6% 1 109.93s 8,307 268 103,150

Comparație rapidă

Schimbă perechea de comparație