Navigasi
AI BENCHY
Advertise here

Mercury 2 vs KAT-Coder-Air V2.5

KAT-Coder-Air V2.5 unggul dalam skor rata-rata dengan 4.8 vs 4.7. Mercury 2 memiliki biaya benchmark lebih rendah di $0.030 vs $0.070. Mercury 2 lebih cepat di 825ms vs 12.46s, dengan tingkat keberhasilan 24.2% vs 36.4%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-08-26

Peringkat
#264
Total token output
9,584
Waktu respons (rata-rata)
825ms
Total Biaya
$0.030
Peringkat
#257
Total token output
97,752
Waktu respons (rata-rata)
12.46s
Total Biaya
$0.070
Model yang direkomendasikan Mercury 2

Its score stays close to the best score here (4.7 vs 4.8), while costing about 2.3x less than KAT-Coder-Air V2.5.

Perbandingan terperinci

Metrik Mercury 2 Mercury 2 none Rilis: 2026-02-24 KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none Rilis: 2026-07-14
Skor 4.7 4.8
Peringkat #264 #257
Keandalan 10.0 10.0
Konsistensi 9.2 7.2
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 24.2% 36.4%
Tes tidak stabil 2 7
Total Run 66 66
Biaya per hasil 0.740 1.382
Total Biaya $0.030 $0.070
Harga input $0.250 / 1M $0.150 / 1M
Harga output $0.750 / 1M $0.600 / 1M
Total token input 89,637 69,376
Token output 9,584 97,752
Token penalaran 0 0
Waktu respons (rata-rata) 825ms 12.46s
Waktu respons (maks) 4.52s 121.05s
Waktu respons (total) 18.14s 274.11s
Parameter ~100B ~35B total (~3B aktif)
Ketersediaan Tertutup Tertutup

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#264 Mercury 2

none
Biaya
$0.002
Waktu
1.8s
Token
1,514 tok

#257 KAT-Coder-Air V2.5

none
Biaya
$0.002
Waktu
14.5s
Token
2,619 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
KAT-Coder-Air V2.5 3.3 9.6 0.0% 0 14.31s 6,472 16,918 0

Perbandingan Cepat

Ganti Pasangan Perbandingan