Navigare
Advertise here

Mercury 2.5 (high) vs GLM 5.1 (medium)

Mercury 2.5 (high) conduce la scorul mediu cu 7.1 vs 7.0. Mercury 2.5 (high) are costul de benchmark mai mic, $0.031 vs $0.727. Mercury 2.5 (high) este mai rapid cu 4.32s vs 58.80s, cu rate de reușită de 62.1% vs 65.2%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-08

Modele comparate

Rang
#134
Total tokenuri de ieșire
174,547
Timp de răspuns (mediu)
4.32s
Cost total
$0.031
Rang
#138
Total tokenuri de ieșire
215,889
Timp de răspuns (mediu)
58.80s
Cost total
$0.727
Model recomandat Mercury 2.5 (high)

Are cel mai bun scor aici (7.1) și costă de aproximativ 23.4x mai puțin decât GLM 5.1 (medium).

Comparație detaliată

Metrică Mercury 2.5 Mercury 2.5 high Lansare: 2026-09-08 GLM 5.1 GLM 5.1 medium Lansare: 2026-04-07
Scor 7.1 7.0
Rang #134 #138
Fiabilitate 9.7 8.1
Consistență 8.6 8.4
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 62.1% 65.2%
Teste instabile 4 4
Rulări totale 66 66
Cost per rezultat 0.259 6.923
Cost total $0.031 $0.727
Preț de intrare $0.040 / 1M $0.966 / 1M
Preț de ieșire $0.150 / 1M $3.036 / 1M
Total tokenuri de intrare 120,068 82,592
Tokenuri de ieșire 3,402 16,089
Tokenuri de raționament 171,145 199,800
Timp de răspuns (mediu) 4.32s 58.80s
Timp de răspuns (maxim) 23.63s 308.75s
Timp de răspuns (total) 95.06s 1234.72s
Parametri ~100B 744B în total (40B activi)
Disponibilitate Închis Sursă deschisă

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#134 Mercury 2.5

high
Cost
$0.001
Timp
3.5s
Tokenuri
2,447 tok

#138 GLM 5.1

medium
Reached the allocated time limit (300 seconds) without receiving showcase output.
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
GLM 5.1 4.6 3.7 44.5% 2 109.63s 5,702 4,871 37,826

Comparație rapidă

Schimbă perechea de comparație