Navigare
Advertise here

Mercury 2.5 Preview (medium) vs GPT-6 Sol

Scorul mediu este practic egal la 6.8 vs 6.8. Mercury 2.5 Preview (medium) are costul de benchmark mai mic, $0.037 vs $0.551. Mercury 2.5 Preview (medium) este mai rapid cu 6.66s vs 9.02s, cu rate de reușită de 66.7% vs 63.8%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-10-01

Modele comparate

Rang
#171
Total tokenuri de ieșire
150,107
Timp de răspuns (mediu)
6.66s
Cost total
$0.037
Rang
#172
Total tokenuri de ieșire
7,989
Timp de răspuns (mediu)
9.02s
Cost total
$0.551
Model recomandat Mercury 2.5 Preview (medium)

Are cel mai bun scor aici (6.8) și costă de aproximativ 15.0x mai puțin decât GPT-6 Sol.

Comparație detaliată

Metrică Mercury 2.5 Preview Mercury 2.5 Preview medium Lansare: 2026-09-02 GPT-6 Sol GPT-6 Sol none Lansare: 2026-09-23
Scor 6.8 6.8
Rang #171 #172
Fiabilitate 10.0 10.0
Consistență 9.6 8.5
Încercări 69/69 69/69
Teste corecte
Rată de trecere pe încercare 66.7% 63.8%
Teste instabile 1 4
Rulări totale 69 69
Cost per rezultat 0.244 4.232
Cost total $0.037 $0.551
Preț de intrare $0.000 / 1M $2.000 / 1M
Preț de ieșire $0.000 / 1M $10.000 / 1M
Total tokenuri de intrare 397,291 235,086
Tokenuri de ieșire 6,355 7,989
Tokenuri de raționament 143,752 0
Timp de răspuns (mediu) 6.66s 9.02s
Timp de răspuns (maxim) 74.63s 57.02s
Timp de răspuns (total) 153.29s 207.45s
Parametri ~100B ~2T în total (~150B activi)
Disponibilitate Închis Închis

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#171 Mercury 2.5 Preview

medium
Cost
$0.001
Timp
2.7s
Tokenuri
2,241 tok

#172 GPT-6 Sol

none
Cost
$0.030
Timp
31.9s
Tokenuri
3,055 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
GPT-6 Sol 5.5 10.0 33.3% 0 12.23s 7,302 389 0

Comparație rapidă

Schimbă perechea de comparație