Navigasi
Advertise here

Mercury 2.5 (medium) vs GLM 5.1

GLM 5.1 unggul dalam skor rata-rata dengan 6.5 vs 6.4. Mercury 2.5 (medium) memiliki biaya benchmark lebih rendah di $0.034 vs $0.451. Mercury 2.5 (medium) lebih cepat di 7.74s vs 11.10s, dengan tingkat keberhasilan 63.8% vs 47.8%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-10-05

Model yang Dibandingkan

Peringkat
#212
Total token output
138,946
Waktu respons (rata-rata)
7.74s
Total Biaya
$0.034
Peringkat
#203
Total token output
20,076
Waktu respons (rata-rata)
11.10s
Total Biaya
$0.451
Model yang direkomendasikan Mercury 2.5 (medium)

Its score stays close to the best score here (6.4 vs 6.5), while costing about 13.4x less than GLM 5.1.

Perbandingan terperinci

Metrik Mercury 2.5 Mercury 2.5 medium Rilis: 2026-09-08 GLM 5.1 GLM 5.1 none Rilis: 2026-04-07
Skor 6.4 6.5
Peringkat #212 #203
Keandalan 9.7 10.0
Konsistensi 8.3 8.2
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 63.8% 47.8%
Tes tidak stabil 5 5
Total Run 69 69
Biaya per hasil 0.280 3.478
Total Biaya $0.034 $0.451
Harga input $0.040 / 1M $1.400 / 1M
Harga output $0.150 / 1M $4.400 / 1M
Harga baca cache $0.004 / 1M $0.260 / 1M
Harga tulis cache T/A T/A
Total token input 317,982 258,956
Token output 3,918 20,076
Token penalaran 135,028 0
Waktu respons (rata-rata) 7.74s 11.10s
Waktu respons (maks) 107.89s 107.19s
Waktu respons (total) 178.07s 255.39s
Parameter ~100B 744B total (40B aktif)
Ketersediaan Tertutup Sumber terbuka

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#212 Mercury 2.5

medium
Biaya
$0.001
Waktu
3.8s
Token
3,386 tok

#203 GLM 5.1

none
Reached the allocated time limit (300 seconds) without receiving showcase output.
Biaya
$0.000
Waktu
300.0s
Token
0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857
GLM 5.1 3.9 9.7 0.0% 0 4.96s 7,256 525 0

Perbandingan Cepat

Ganti Pasangan Perbandingan