Navigasi
Advertise here

KAT-Coder-Pro V2.5 (high) vs GLM 5.1

Skor rata-rata hampir imbang di 6.5 vs 6.5. GLM 5.1 memiliki biaya benchmark lebih rendah di $0.451 vs $0.506. GLM 5.1 lebih cepat di 11.10s vs 21.21s, dengan tingkat keberhasilan 60.9% vs 47.8%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-11-13

Model yang Dibandingkan

Peringkat
#275
Total token output
144,359
Waktu respons (rata-rata)
21.21s
Total Biaya
$0.506
Peringkat
#274
Total token output
20,076
Waktu respons (rata-rata)
11.10s
Total Biaya
$0.451
Model yang direkomendasikan GLM 5.1

It has the best score here (6.5), while responding about 1.9x faster than KAT-Coder-Pro V2.5 (high).

Perbandingan terperinci

Metrik KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Rilis: 2026-07-14 GLM 5.1 GLM 5.1 none Rilis: 2026-04-07
Skor 6.5 6.5
Peringkat #275 #274
Keandalan 10.0 10.0
Konsistensi 7.9 8.2
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 60.9% 47.8%
Tes tidak stabil 6 5
Total Run 69 69
Biaya per hasil 4.599 3.478
Total Biaya $0.506 $0.451
Harga input $0.740 / 1M $1.400 / 1M
Harga output $2.960 / 1M $4.400 / 1M
Harga baca cache $0.150 / 1M $0.260 / 1M
Harga tulis cache T/A T/A
Total token input 106,085 258,956
Token output 9,071 20,076
Token penalaran 135,288 0
Waktu respons (rata-rata) 21.21s 11.10s
Waktu respons (maks) 199.97s 107.19s
Waktu respons (total) 487.83s 255.39s
Parameter ~700B total (~72B aktif) 744B total (40B aktif)
Ketersediaan Tertutup Sumber terbuka

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#275 KAT-Coder-Pro V2.5

high
Biaya
$0.009
Waktu
26.4s
Token
3,117 tok

#274 GLM 5.1

none
Reached the allocated time limit (300 seconds) without receiving showcase output.
Biaya
$0.000
Waktu
300.0s
Token
0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
GLM 5.1 3.9 9.7 0.0% 0 4.96s 7,256 525 0

Ganti Pasangan Perbandingan