Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs Qwen: Qwen3.5 Plus 2026-02-15

Ringkasan

Skor rata-rata hampir imbang di 8.0 vs 8.0. KAT-Coder-Pro V2.5 (low) memiliki biaya benchmark lebih rendah di $0.220 vs $0.310. KAT-Coder-Pro V2.5 (low) lebih cepat di 10.44s vs 73.79s, dengan tingkat keberhasilan 71.4% vs 73.0%.

Model yang direkomendasikanKAT-Coder-Pro V2.5 (low)It has the best score here (8.0), while responding about 7.1x faster than Qwen3.5 Plus 2026-02-15 (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Rilis: 2026-07-14 Qwen3.5 Plus 2026-02-15 Qwen3.5 Plus 2026-02-15 medium Rilis: 2026-02-15
Skor 8.0 8.0
Peringkat #35 #34
Keandalan 9.9 10.0
Konsistensi 7.3 8.8
Tes benar
Tingkat lulus per percobaan 71.4% 73.0%
Tes tidak stabil 7 3
Total Run 63 63
Biaya per hasil 1.991 2.445
Total Biaya $0.220 $0.310
Harga input $0.740 / 1M $0.260 / 1M
Harga output $2.960 / 1M $1.560 / 1M
Total token input 42,750 40,918
Token output 2,167 2,159
Token penalaran 61,133 189,604
Waktu respons (rata-rata) 10.44s 73.79s
Waktu respons (maks) 51.34s 266.69s
Waktu respons (total) 219.17s 1033.07s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
Biaya
$0.016
Waktu
47.6s
Token
5,182 tok

#34 Qwen3.5 Plus 2026-02-15

medium
Biaya
$0.011
Waktu
125.5s
Token
7,040 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
Qwen3.5 Plus 2026-02-15 6.6 7.1 44.4% 1 180.70s 6,950 420 80,595

Perbandingan Cepat

Ganti Pasangan Perbandingan