Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.6 Luna

Ringkasan

Skor rata-rata hampir imbang di 7.5 vs 7.6. GPT-5.6 Luna (medium) memiliki biaya benchmark lebih rendah di $0.258 vs $0.275. GPT-5.6 Luna (medium) lebih cepat di 6.70s vs 12.95s, dengan tingkat keberhasilan 65.1% vs 63.5%.

Model yang direkomendasikanGPT-5.6 Luna (medium)It has the best score here (7.6), while responding about 1.9x faster than KAT-Coder-Pro V2.5 (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Rilis: 2026-07-14 GPT-5.6 Luna GPT-5.6 Luna medium Rilis: 2026-07-09
Skor 7.5 7.6
Peringkat #60 #57
Keandalan 10.0 10.0
Konsistensi 7.7 9.6
Tes benar
Tingkat lulus per percobaan 65.1% 63.5%
Tes tidak stabil 6 1
Total Run 63 63
Biaya per hasil 2.498 1.978
Total Biaya $0.275 $0.258
Harga input $0.740 / 1M $1.000 / 1M
Harga output $2.960 / 1M $6.000 / 1M
Total token input 42,750 35,699
Token output 2,098 2,148
Token penalaran 80,027 34,740
Waktu respons (rata-rata) 12.95s 6.70s
Waktu respons (maks) 81.45s 29.85s
Waktu respons (total) 271.92s 140.62s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
Biaya
$0.009
Waktu
25.6s
Token
2,939 tok

#57 GPT-5.6 Luna

medium
Biaya
$0.014
Waktu
14.6s
Token
2,362 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
GPT-5.6 Luna 5.4 7.2 44.4% 1 10.38s 7,302 564 9,928

Perbandingan Cepat

Ganti Pasangan Perbandingan