Kwaipilot: KAT-Coder-Pro V2.5 vs Qwen: Qwen3.7 Max

Qwen3.7 Max unggul dalam skor rata-rata dengan 7.4 vs 7.4. Qwen3.7 Max memiliki biaya benchmark lebih rendah di $0.197 vs $0.387. Qwen3.7 Max lebih cepat di 4.52s vs 19.47s, dengan tingkat keberhasilan 69.7% vs 68.2%.

Model yang direkomendasikanQwen3.7 MaxIt has the best score here (7.4), while costing about 2.0x less than KAT-Coder-Pro V2.5 (low).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-17

Metrik	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Rilis: 2026-07-14	Qwen3.7 Max Qwen3.7 Max none Rilis: 2026-05-22

Metrik	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Rilis: 2026-07-14	Qwen3.7 Max Qwen3.7 Max none Rilis: 2026-05-22
Skor	7.4	7.4
Peringkat	#59	#57
Keandalan	10.0	9.9
Konsistensi	7.0	10.0
Tes benar
Tingkat lulus per percobaan	69.7%	68.2%
Tes tidak stabil	8	0
Total Run	66	66
Biaya per hasil	3.514	1.582
Total Biaya	$0.387	$0.197
Harga input	$0.740 / 1M	$1.475 / 1M
Harga output	$2.960 / 1M	$4.425 / 1M
Total token input	87,673	95,983
Token output	7,166	12,446
Token penalaran	101,474	0
Waktu respons (rata-rata)	19.47s	4.52s
Waktu respons (maks)	209.15s	72.30s
Waktu respons (total)	428.31s	99.52s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#59 KAT-Coder-Pro V2.5

low

Biaya: $0.016
Waktu: 47.6s
Token: 5,182 tok

#57 Qwen3.7 Max

none

Biaya: $0.046
Waktu: 195.0s
Token: 12,171 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	6.9	5.8	75.0%	2		4.20s	672	277	4,228
Qwen3.7 Max	6.5	10.0	50.0%	0		1.08s	696	242	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	7.8	10.0	66.7%	0		24.87s	7,893	402	24,945
Qwen3.7 Max	5.5	10.0	33.3%	0		1.35s	7,911	582	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	6.4	5.8	66.7%	1		111.87s	60,055	5,393	43,732
Qwen3.7 Max	6.5	10.0	50.0%	0		37.23s	68,425	10,623	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		4.19s	7,776	288	1,917
Qwen3.7 Max	10.0	10.0	100.0%	0		1.35s	7,794	243	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	4.1	4.4	44.5%	2		17.52s	771	35	16,877
Qwen3.7 Max	7.7	10.0	66.7%	0		975ms	789	15	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	4.1	2.7	33.3%	1		2.32s	516	99	412
Qwen3.7 Max	10.0	10.0	100.0%	0		1.04s	522	120	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		2.53s	699	83	1,008
Qwen3.7 Max	10.0	10.0	100.0%	0		943ms	711	72	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	6.4	4.4	77.8%	2		3.11s	696	289	1,820
Qwen3.7 Max	10.0	10.0	100.0%	0		1.13s	714	314	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		18.45s	8,391	282	834
Qwen3.7 Max	10.0	10.0	100.0%	0		3.92s	8,211	222	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		17.06s	204	18	5,701
Qwen3.7 Max	3.0	10.0	0.0%	0		856ms	210	13	0

Perbandingan Cepat

Ganti Pasangan Perbandingan

Claude Sonnet 4.6nonevsKAT-Coder-Pro V2.5low GPT-5.4 MinimediumvsQwen3.7 Maxnone GPT-5.6 TerralowvsQwen3.7 Maxnone Gemini 3.1 Flash Lite PreviewmediumvsKAT-Coder-Pro V2.5low Gemini 3 Flash PreviewlowvsQwen3.7 Maxnone Gemini 3.1 Flash LitemediumvsKAT-Coder-Pro V2.5low KAT-Coder-Pro V2.5lowvsQwen3.5-27Bmedium GPT-5.4 NanomediumvsQwen3.7 Maxnone Kimi K2.7 CodemediumvsQwen3.7 Maxnone Claude Opus 4.8nonevsKAT-Coder-Pro V2.5low Nemotron 3 UltramediumTersedia gratisvsQwen3.7 Maxnone KAT-Coder-Pro V2.5lowvsQwen3.5 Plus 2026-02-15medium