Navigare
Advertise here

Claude Sonnet 5.5 (low) vs Mercury 2.5 Preview (medium)

Scorul mediu este practic egal la 6.9 vs 6.8. Mercury 2.5 Preview (medium) are costul de benchmark mai mic, $0.037 vs $0.909. Mercury 2.5 Preview (medium) este mai rapid cu 6.66s vs 7.46s, cu rate de reușită de 46.4% vs 66.7%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-10-01

Modele comparate

Rang
#166
Total tokenuri de ieșire
32,443
Timp de răspuns (mediu)
7.46s
Cost total
$0.909
Rang
#171
Total tokenuri de ieșire
150,107
Timp de răspuns (mediu)
6.66s
Cost total
$0.037
Model recomandat Mercury 2.5 Preview (medium)

Are cel mai bun scor aici (6.8) și costă de aproximativ 24.8x mai puțin decât Claude Sonnet 5.5 (low).

Comparație detaliată

Metrică Claude Sonnet 5.5 Claude Sonnet 5.5 low Lansare: 2026-09-29 Mercury 2.5 Preview Mercury 2.5 Preview medium Lansare: 2026-09-02
Scor 6.9 6.8
Rang #166 #171
Fiabilitate 10.0 10.0
Consistență 9.4 9.6
Încercări 69/69 69/69
Teste corecte
Rată de trecere pe încercare 46.4% 66.7%
Teste instabile 2 1
Rulări totale 69 69
Cost per rezultat 9.082 0.244
Cost total $0.909 $0.037
Preț de intrare $2.000 / 1M $0.000 / 1M
Preț de ieșire $10.000 / 1M $0.000 / 1M
Total tokenuri de intrare 291,853 397,291
Tokenuri de ieșire 24,116 6,355
Tokenuri de raționament 8,327 143,752
Timp de răspuns (mediu) 7.46s 6.66s
Timp de răspuns (maxim) 46.61s 74.63s
Timp de răspuns (total) 171.47s 153.29s
Parametri ~1T în total (~100B activi) ~100B
Disponibilitate Închis Închis

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#166 Claude Sonnet 5.5

low
Cost
$0.020
Timp
15.3s
Tokenuri
2,077 tok

#171 Mercury 2.5 Preview

medium
Cost
$0.001
Timp
2.7s
Tokenuri
2,241 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Claude Sonnet 5.5 3.2 9.7 0.0% 0 5.81s 10,608 5,903 0
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126

Comparație rapidă

Schimbă perechea de comparație