Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.6 Terra

Ringkasan

Skor rata-rata hampir imbang di 7.7 vs 7.7. KAT-Coder-Pro V2.5 (high) memiliki biaya benchmark lebih rendah di $0.246 vs $0.343. GPT-5.6 Terra (low) lebih cepat di 4.88s vs 12.30s, dengan tingkat keberhasilan 63.5% vs 74.6%.

Model yang direkomendasikanGPT-5.6 Terra (low)It has the best score here (7.7), while responding about 2.5x faster than KAT-Coder-Pro V2.5 (high).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Rilis: 2026-07-14 GPT-5.6 Terra GPT-5.6 Terra low Rilis: 2026-07-09
Skor 7.7 7.7
Peringkat #53 #49
Keandalan 10.0 10.0
Konsistensi 8.1 8.1
Tes benar
Tingkat lulus per percobaan 63.5% 74.6%
Tes tidak stabil 5 5
Total Run 63 63
Biaya per hasil 2.228 2.637
Total Biaya $0.246 $0.343
Harga input $0.740 / 1M $2.500 / 1M
Harga output $2.960 / 1M $15.000 / 1M
Total token input 42,750 34,226
Token output 2,509 1,943
Token penalaran 69,594 15,201
Waktu respons (rata-rata) 12.30s 4.88s
Waktu respons (maks) 95.65s 19.85s
Waktu respons (total) 258.34s 102.53s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#53 KAT-Coder-Pro V2.5

high
Biaya
$0.009
Waktu
26.4s
Token
3,117 tok

#49 GPT-5.6 Terra

low
Biaya
$0.034
Waktu
16.8s
Token
2,348 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
GPT-5.6 Terra 6.6 4.6 77.8% 2 9.56s 7,302 429 6,821

Perbandingan Cepat

Ganti Pasangan Perbandingan