Navigasi
Advertise here

Mercury 2.5 vs KAT Coder AIR V2.5 (default)

KAT Coder AIR V2.5 (default) unggul dalam skor rata-rata dengan 4.4 vs 4.1. Mercury 2.5 memiliki biaya benchmark lebih rendah di $0.026 vs $0.070. Mercury 2.5 lebih cepat di 5.10s vs 11.96s, dengan tingkat keberhasilan 24.6% vs 34.8%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-10-19

Model yang Dibandingkan

Peringkat
#397
Total token output
89,958
Waktu respons (rata-rata)
5.10s
Total Biaya
$0.026
Peringkat
#387
Total token output
97,752
Waktu respons (rata-rata)
11.96s
Total Biaya
$0.070
Model yang direkomendasikan KAT Coder AIR V2.5 (default)

Model ini memiliki skor tertinggi dalam perbandingan ini (4.4) dan keseimbangan terbaik antara biaya dan waktu respons di antara 2 model.

Perbandingan terperinci

Metrik Mercury 2.5 Mercury 2.5 none Rilis: 2026-09-08 KAT Coder AIR V2.5 KAT Coder AIR V2.5 default Rilis: 2026-07-14
Skor 4.1 4.4
Peringkat #397 #387
Keandalan 10.0 10.0
Konsistensi 7.6 7.4
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 24.6% 34.8%
Tes tidak stabil 7 7
Total Run 69 69
Biaya per hasil 1.298 1.382
Total Biaya $0.026 $0.070
Harga input $0.040 / 1M $0.150 / 1M
Harga output $0.150 / 1M $0.600 / 1M
Harga baca cache $0.004 / 1M T/A
Harga tulis cache T/A T/A
Total token input 311,488 69,376
Token output 89,958 7,792
Token penalaran 0 89,960
Waktu respons (rata-rata) 5.10s 11.96s
Waktu respons (maks) 63.41s 121.05s
Waktu respons (total) 117.24s 275.18s
Parameter ~100B ~35B total (~3B aktif)
Ketersediaan Tertutup Tertutup

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#397 Mercury 2.5

none
Biaya
$0.001
Waktu
2.7s
Token
2,749 tok

#387 KAT Coder AIR V2.5

default
Biaya
$0.002
Waktu
14.5s
Token
2,619 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 3.7 7.0 22.2% 1 12.50s 7,888 61,297 0
KAT Coder AIR V2.5 3.3 9.6 0.0% 0 14.31s 6,472 2,032 14,886

Ganti Pasangan Perbandingan