Navigasi
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Mercury 2.5 Preview (medium) vs Grok Build 0.1 (medium)

Skor rata-rata hampir imbang di 7.5 vs 7.5. Mercury 2.5 Preview (medium) memiliki biaya benchmark lebih rendah di $0.024 vs $1.130. Mercury 2.5 Preview (medium) lebih cepat di 3.58s vs 54.50s, dengan tingkat keberhasilan 69.7% vs 60.6%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-02

Peringkat
#91
Total token output
127,034
Waktu respons (rata-rata)
3.58s
Total Biaya
$0.024
Peringkat
#93
Total token output
511,406
Waktu respons (rata-rata)
54.50s
Total Biaya
$1.130
Model yang direkomendasikan Mercury 2.5 Preview (medium)

It has the best score here (7.5), while costing about 47.9x less than Grok Build 0.1 (medium).

Perbandingan terperinci

Metrik Mercury 2.5 Preview Mercury 2.5 Preview medium Rilis: 2026-09-02 Grok Build 0.1 Grok Build 0.1 medium Rilis: 2026-05-21
Skor 7.5 7.5
Peringkat #91 #93
Keandalan 10.0 10.0
Konsistensi 9.6 9.6
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 69.7% 60.6%
Tes tidak stabil 1 1
Total Run 66 66
Biaya per hasil 0.158 8.691
Total Biaya $0.024 $1.130
Harga input $0.040 / 1M $1.000 / 1M
Harga output $0.150 / 1M $2.000 / 1M
Total token input 112,713 106,946
Token output 5,436 7,993
Token penalaran 121,598 503,413
Waktu respons (rata-rata) 3.58s 54.50s
Waktu respons (maks) 17.84s 252.69s
Waktu respons (total) 78.66s 1199.07s
Parameter ~100B ~300B total (~30B aktif)
Ketersediaan Tertutup Tertutup

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#91 Mercury 2.5 Preview

medium
Biaya
$0.001
Waktu
2.7s
Token
2,241 tok

#93 SpaceXAI: Grok Build 0.1

medium
Biaya
$0.028
Waktu
81.3s
Token
14,009 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
Grok Build 0.1 5.7 9.7 33.3% 0 108.46s 8,304 1,138 161,452

Perbandingan Cepat

Ganti Pasangan Perbandingan