Navigasi
Advertise here

Mercury 2.5 Preview (medium) vs KAT-Coder-Pro V2.5 (medium)

Mercury 2.5 Preview (medium) unggul dalam skor rata-rata dengan 6.8 vs 6.2. Mercury 2.5 Preview (medium) memiliki biaya benchmark lebih rendah di $0.039 vs $0.669. Mercury 2.5 Preview (medium) lebih cepat di 6.66s vs 23.94s, dengan tingkat keberhasilan 66.7% vs 62.3%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-10-19

Model yang Dibandingkan

Peringkat
#204
Total token output
150,107
Waktu respons (rata-rata)
6.66s
Total Biaya
$0.039
Peringkat
#268
Total token output
139,375
Waktu respons (rata-rata)
23.94s
Total Biaya
$0.669
Model yang direkomendasikan Mercury 2.5 Preview (medium)

It has the best score here (6.8), while costing about 17.4x less than KAT-Coder-Pro V2.5 (medium).

Perbandingan terperinci

Metrik Mercury 2.5 Preview Mercury 2.5 Preview medium Rilis: 2026-09-02 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Rilis: 2026-07-14
Skor 6.8 6.2
Peringkat #204 #268
Keandalan 10.0 10.0
Konsistensi 9.6 7.2
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 66.7% 62.3%
Tes tidak stabil 1 8
Total Run 69 69
Biaya per hasil 0.244 4.342
Total Biaya $0.039 $0.669
Harga input $0.040 / 1M $0.740 / 1M
Harga output $0.150 / 1M $2.960 / 1M
Harga baca cache T/A $0.150 / 1M
Harga tulis cache T/A T/A
Total token input 397,291 87,916
Token output 6,355 7,213
Token penalaran 143,752 132,162
Waktu respons (rata-rata) 6.66s 23.94s
Waktu respons (maks) 74.63s 257.00s
Waktu respons (total) 153.29s 550.52s
Parameter ~100B ~700B total (~72B aktif)
Ketersediaan Tertutup Tertutup

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#204 Mercury 2.5 Preview

medium
Biaya
$0.001
Waktu
2.7s
Token
2,241 tok

#268 KAT-Coder-Pro V2.5

medium
Biaya
$0.009
Waktu
25.6s
Token
2,939 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658

Ganti Pasangan Perbandingan