Navigasi
Advertise here

KAT-Coder-Pro V2.5 (high) vs GPT-6 Sol

Skor rata-rata hampir imbang di 7.2 vs 7.2. GPT-6 Sol memiliki biaya benchmark lebih rendah di $0.280 vs $0.506. GPT-6 Sol lebih cepat di 6.84s vs 22.11s, dengan tingkat keberhasilan 63.6% vs 66.7%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-23

Model yang Dibandingkan

Peringkat
#146
Total token output
144,359
Waktu respons (rata-rata)
22.11s
Total Biaya
$0.506
Peringkat
#148
Total token output
6,696
Waktu respons (rata-rata)
6.84s
Total Biaya
$0.280
Model yang direkomendasikan GPT-6 Sol

It has the best score here (7.2), while costing about 1.8x less than KAT-Coder-Pro V2.5 (high).

Perbandingan terperinci

Metrik KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Rilis: 2026-07-14 GPT-6 Sol GPT-6 Sol none Rilis: 2026-09-23
Skor 7.2 7.2
Peringkat #146 #148
Keandalan 10.0 10.0
Konsistensi 7.8 8.5
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 63.6% 66.7%
Tes tidak stabil 6 4
Total Run 66 66
Biaya per hasil 4.599 2.151
Total Biaya $0.506 $0.280
Harga input $0.740 / 1M $2.000 / 1M
Harga output $2.960 / 1M $10.000 / 1M
Total token input 106,085 106,332
Token output 9,071 6,696
Token penalaran 135,288 0
Waktu respons (rata-rata) 22.11s 6.84s
Waktu respons (maks) 199.97s 23.89s
Waktu respons (total) 486.31s 150.43s
Parameter ~700B total (~72B aktif) ~2T total (~150B aktif)
Ketersediaan Tertutup Tertutup

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#146 KAT-Coder-Pro V2.5

high
Biaya
$0.009
Waktu
26.4s
Token
3,117 tok

#148 GPT-6 Sol

none
Biaya
$0.030
Waktu
31.9s
Token
3,055 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
GPT-6 Sol 5.5 10.0 33.3% 0 12.23s 7,302 389 0

Perbandingan Cepat

Ganti Pasangan Perbandingan