Navigasi
Advertise here

Mercury 2.5 vs Grok 4.20

Grok 4.20 unggul dalam skor rata-rata dengan 4.1 vs 3.9. Mercury 2.5 memiliki biaya benchmark lebih rendah di $0.016 vs $0.057. Grok 4.20 lebih cepat di 1.11s vs 2.45s, dengan tingkat keberhasilan 25.8% vs 27.3%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-08

Model yang Dibandingkan

Peringkat
#312
Total token output
71,143
Waktu respons (rata-rata)
2.45s
Total Biaya
$0.016
Peringkat
#304
Total token output
1,923
Waktu respons (rata-rata)
1.11s
Total Biaya
$0.057
Model yang direkomendasikan Grok 4.20

It has the best score here (4.1), while responding about 2.2x faster than Mercury 2.5.

Perbandingan terperinci

Metrik Mercury 2.5 Mercury 2.5 none Rilis: 2026-09-08 Grok 4.20 Grok 4.20 none Rilis: 2026-03-31
Skor 3.9 4.1
Peringkat #312 #304
Keandalan 10.0 T/A
Konsistensi 7.5 8.1
Percobaan 66/66 54/66
Tes benar
Tingkat lulus per percobaan 25.8% 27.3%
Tes tidak stabil 7 0
Total Run 66 54
Biaya per hasil 0.782 1.570
Total Biaya $0.016 $0.057
Harga input $0.040 / 1M $1.250 / 1M
Harga output $0.150 / 1M $2.500 / 1M
Total token input 123,740 41,313
Token output 71,143 1,923
Token penalaran 0 0
Waktu respons (rata-rata) 2.45s 1.11s
Waktu respons (maks) 36.48s 6.04s
Waktu respons (total) 53.83s 19.96s
Parameter ~100B ~1T total (~100B aktif)
Ketersediaan Tertutup Tertutup

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#312 Mercury 2.5

none
Biaya
$0.001
Waktu
2.7s
Token
2,749 tok

#304 xAI: Grok 4.20

none
Biaya
$0.004
Waktu
6.5s
Token
1,367 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 3.7 7.0 22.2% 1 12.50s 7,888 61,297 0
Grok 4.20 1.1 3.1 0.0% 0 1.22s 1,074 312 0

Perbandingan Cepat

Ganti Pasangan Perbandingan

Mercury 2.5nonevsLing 3.0 TinyhighMercury 2.5nonevsLing 3.0 TinylowMercury 2.5nonevsQwen3.5-9BmediumMercury 2.5nonevsLing 3.0 TinymediumGrok 4.20nonevsGLM 4.7 FlashmediumLing 3.0 TinyhighvsGrok 4.20noneLing 3.0 TinylowvsGrok 4.20noneQwen3.5-9BmediumvsGrok 4.20noneLing 3.0 TinymediumvsGrok 4.20noneMercury 2.5nonevsGLM 4.7 FlashmediumMiniMax M2.5mediumvsGrok 4.20noneQwen3 Coder NextmediumvsGrok 4.20none