Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs OpenAI: GPT-5.6 Terra

Ringkasan

Skor rata-rata hampir imbang di 6.0 vs 6.0. KAT-Coder-Air V2.5 (low) memiliki biaya benchmark lebih rendah di $0.030 vs $0.130. GPT-5.6 Terra lebih cepat di 1.25s vs 6.47s, dengan tingkat keberhasilan 46.0% vs 42.9%.

Model yang direkomendasikanKAT-Coder-Air V2.5 (low)It has the best score here (6.0), while costing about 4.4x less than GPT-5.6 Terra.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 low Rilis: 2026-07-14 GPT-5.6 Terra GPT-5.6 Terra none Rilis: 2026-07-09
Skor 6.0 6.0
Peringkat #124 #123
Keandalan 9.7 10.0
Konsistensi 7.6 9.3
Tes benar
Tingkat lulus per percobaan 46.0% 42.9%
Tes tidak stabil 6 2
Total Run 63 63
Biaya per hasil 0.427 1.623
Total Biaya $0.030 $0.130
Harga input $0.150 / 1M $2.500 / 1M
Harga output $0.600 / 1M $15.000 / 1M
Total token input 42,464 39,552
Token output 4,227 2,060
Token penalaran 34,864 0
Waktu respons (rata-rata) 6.47s 1.25s
Waktu respons (maks) 25.49s 3.97s
Waktu respons (total) 135.80s 26.21s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#124 KAT-Coder-Air V2.5

low
Biaya
$0.004
Waktu
29.9s
Token
6,008 tok

#123 GPT-5.6 Terra

none
Biaya
$0.030
Waktu
14.7s
Token
2,082 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
KAT-Coder-Air V2.5 3.5 7.3 11.1% 1 11.06s 7,893 2,001 13,623
GPT-5.6 Terra 5.5 10.0 33.3% 0 1.00s 7,302 336 0

Perbandingan Cepat

Ganti Pasangan Perbandingan