Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs OpenAI: GPT-5.5

Ringkasan

GPT-5.5 unggul dalam skor rata-rata dengan 6.3 vs 6.2. KAT-Coder-Air V2.5 (medium) memiliki biaya benchmark lebih rendah di $0.045 vs $0.231. GPT-5.5 lebih cepat di 1.89s vs 8.28s, dengan tingkat keberhasilan 47.6% vs 54.0%.

Model yang direkomendasikanKAT-Coder-Air V2.5 (medium)Its score stays close to the best score here (6.2 vs 6.3), while costing about 5.1x less than GPT-5.5.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium Rilis: 2026-07-14 GPT-5.5 GPT-5.5 none Rilis: 2026-04-24
Skor 6.2 6.3
Peringkat #115 #109
Keandalan 9.7 10.0
Konsistensi 8.8 8.8
Tes benar
Tingkat lulus per percobaan 47.6% 54.0%
Tes tidak stabil 3 3
Total Run 63 63
Biaya per hasil 0.562 2.302
Total Biaya $0.045 $0.231
Harga input $0.150 / 1M $5.000 / 1M
Harga output $0.600 / 1M $30.000 / 1M
Total token input 42,750 34,212
Token output 7,759 1,971
Token penalaran 56,357 0
Waktu respons (rata-rata) 8.28s 1.89s
Waktu respons (maks) 48.19s 5.56s
Waktu respons (total) 173.80s 39.64s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#115 KAT-Coder-Air V2.5

medium
Biaya
$0.003
Waktu
23.7s
Token
4,924 tok

#109 GPT-5.5

none
Biaya
$0.090
Waktu
54.3s
Token
3,063 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
KAT-Coder-Air V2.5 3.6 7.0 22.2% 1 23.37s 7,893 5,199 29,973
GPT-5.5 5.5 10.0 33.3% 0 1.35s 7,305 462 0

Perbandingan Cepat

Ganti Pasangan Perbandingan