Navigasi
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Qwen: Qwen3.5-27B

Ringkasan

KAT-Coder-Air V2.5 (low) unggul dalam skor rata-rata dengan 6.0 vs 5.9. Qwen3.5-27B memiliki biaya benchmark lebih rendah di $0.015 vs $0.030. Qwen3.5-27B lebih cepat di 1.68s vs 6.47s, dengan tingkat keberhasilan 46.0% vs 38.1%.

Model yang direkomendasikanQwen3.5-27BIts score stays close to the best score here (5.9 vs 6.0), while costing about 2.1x less than KAT-Coder-Air V2.5 (low).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 low Rilis: 2026-07-14 Qwen3.5-27B Qwen3.5-27B none Rilis: 2026-02-24
Skor 6.0 5.9
Peringkat #124 #128
Keandalan 9.7 10.0
Konsistensi 7.6 9.3
Tes benar
Tingkat lulus per percobaan 46.0% 38.1%
Tes tidak stabil 6 2
Total Run 63 63
Biaya per hasil 0.427 0.249
Total Biaya $0.030 $0.015
Harga input $0.150 / 1M $0.195 / 1M
Harga output $0.600 / 1M $1.560 / 1M
Total token input 42,464 44,478
Token output 4,227 3,592
Token penalaran 34,864 0
Waktu respons (rata-rata) 6.47s 1.68s
Waktu respons (maks) 25.49s 9.39s
Waktu respons (total) 135.80s 35.25s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#124 KAT-Coder-Air V2.5

low
Biaya
$0.004
Waktu
29.9s
Token
6,008 tok

#128 Qwen3.5-27B

none
Biaya
$0.007
Waktu
42.9s
Token
4,273 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
KAT-Coder-Air V2.5 3.5 7.3 11.1% 1 11.06s 7,893 2,001 13,623
Qwen3.5-27B 5.8 10.0 33.3% 0 1.80s 7,913 415 0

Perbandingan Cepat

Ganti Pasangan Perbandingan