Navigare
AI BENCHY
Advertise here

Mercury 2.5 Preview (medium) vs Qwen3.8 2.4T A95B (high)

Mercury 2.5 Preview (medium) conduce la scorul mediu cu 7.5 vs 7.4. Mercury 2.5 Preview (medium) are costul de benchmark mai mic, $0.024 vs $2.357. Mercury 2.5 Preview (medium) este mai rapid cu 3.58s vs 120.59s, cu rate de reușită de 69.7% vs 74.2%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-02

Rang
#91
Total tokenuri de ieșire
127,034
Timp de răspuns (mediu)
3.58s
Cost total
$0.024
Rang
#99
Total tokenuri de ieșire
456,028
Timp de răspuns (mediu)
120.59s
Cost total
$2.357
Model recomandat Mercury 2.5 Preview (medium)

Are cel mai bun scor aici (7.5) și costă de aproximativ 100.0x mai puțin decât Qwen3.8 2.4T A95B (high).

Comparație detaliată

Metrică Mercury 2.5 Preview Mercury 2.5 Preview medium Lansare: 2026-09-02 Qwen3.8 2.4T A95B Qwen3.8 2.4T A95B high Lansare: 2026-08-12
Scor 7.5 7.4
Rang #91 #99
Fiabilitate 10.0 9.4
Consistență 9.6 8.3
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 69.7% 74.2%
Teste instabile 1 4
Rulări totale 66 66
Cost per rezultat 0.158 16.832
Cost total $0.024 $2.357
Preț de intrare $0.040 / 1M $2.000 / 1M
Preț de ieșire $0.150 / 1M $6.000 / 1M
Total tokenuri de intrare 112,713 108,931
Tokenuri de ieșire 5,436 112,801
Tokenuri de raționament 121,598 343,227
Timp de răspuns (mediu) 3.58s 120.59s
Timp de răspuns (maxim) 17.84s 532.28s
Timp de răspuns (total) 78.66s 2653.05s
Parametri ~100B 2.4T în total (95B activi)
Disponibilitate Închis Ponderi disponibile

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#91 Mercury 2.5 Preview

medium
Cost
$0.001
Timp
2.7s
Tokenuri
2,241 tok

#99 Qwen3.8 2.4T A95B

high
SVG invalid
Cost
$0.000
Timp
600.0s
Tokenuri
0 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
Qwen3.8 2.4T A95B 5.9 6.3 55.6% 1 160.52s 6,399 3,310 48,078

Comparație rapidă

Schimbă perechea de comparație