Navigasi
Advertise here

Mercury 2.5 (medium) vs GLM 5.3 (low)

Skor rata-rata hampir imbang di 6.8 vs 6.8. Mercury 2.5 (medium) memiliki biaya benchmark lebih rendah di $0.022 vs $0.257. Mercury 2.5 (medium) lebih cepat di 3.19s vs 13.65s, dengan tingkat keberhasilan 65.2% vs 65.2%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-08

Model yang Dibandingkan

Peringkat
#157
Total token output
120,129
Waktu respons (rata-rata)
3.19s
Total Biaya
$0.022
Peringkat
#155
Total token output
24,808
Waktu respons (rata-rata)
13.65s
Total Biaya
$0.257
Model yang direkomendasikan Mercury 2.5 (medium)

It has the best score here (6.8), while costing about 11.8x less than GLM 5.3 (low).

Perbandingan terperinci

Metrik Mercury 2.5 Mercury 2.5 medium Rilis: 2026-09-08 GLM 5.3 GLM 5.3 low Rilis: 2026-08-20
Skor 6.8 6.8
Peringkat #157 #155
Keandalan 9.8 10.0
Konsistensi 8.6 8.5
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 65.2% 65.2%
Tes tidak stabil 4 4
Total Run 66 66
Biaya per hasil 0.181 2.135
Total Biaya $0.022 $0.257
Harga input $0.040 / 1M $1.400 / 1M
Harga output $0.150 / 1M $4.400 / 1M
Total token input 91,402 104,989
Token output 3,138 8,532
Token penalaran 116,991 16,276
Waktu respons (rata-rata) 3.19s 13.65s
Waktu respons (maks) 9.87s 83.60s
Waktu respons (total) 70.18s 300.22s
Parameter ~100B 744B total (40B aktif)
Ketersediaan Tertutup Tertutup

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#157 Mercury 2.5

medium
Biaya
$0.001
Waktu
3.8s
Token
3,386 tok

#155 GLM 5.3

low
Biaya
$0.007
Waktu
28.4s
Token
1,599 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857
GLM 5.3 6.2 6.9 55.6% 1 21.02s 7,317 368 6,764

Perbandingan Cepat

Ganti Pasangan Perbandingan