KAT-Coder-Air V2.5 (high) vs Qwen3.8 27B

Model yang Dibandingkan

Model yang direkomendasikan Qwen3.8 27B

Its score stays close to the best score here (5.5 vs 5.6), while costing about 13.5x less than KAT-Coder-Air V2.5 (high).

Metrik	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Rilis: 2026-07-14	Qwen3.8 27B Qwen3.8 27B none Rilis: 2026-08-14

Metrik	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Rilis: 2026-07-14	Qwen3.8 27B Qwen3.8 27B none Rilis: 2026-08-14
Skor	5.6	5.5
Peringkat	#265	#277
Keandalan	9.8	10.0
Konsistensi	8.1	10.0
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	42.4%	40.9%
Tes tidak stabil	5	0
Total Run	66	66
Biaya per hasil	1.091	~0.063
Total Biaya	$0.077	~$0.006
Harga input	$0.150 / 1M	T/A
Harga output	$0.600 / 1M	T/A
Total token input	50,423	122,463
Token output	4,144	11,445
Token penalaran	110,510	0
Waktu respons (rata-rata)	15.87s	3.12s
Waktu respons (maks)	118.35s	44.76s
Waktu respons (total)	349.16s	68.69s
Parameter	~35B total (~3B aktif)	27.3B
Ketersediaan	Tertutup	Bobot tersedia

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

high

Reached the allocated time limit (300 seconds) without receiving showcase output.

none

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	6.9	5.8	75.0%	2		2.49s	615	204	1,290
Qwen3.8 27B	6.5	10.0	50.0%	0		828ms	696	267	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	4.3	7.3	11.1%	1		39.07s	6,948	1,166	55,883
Qwen3.8 27B	5.5	10.0	33.3%	0		1.19s	7,911	408	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	6.5	10.0	50.0%	0		74.48s	23,854	485	28,559
Qwen3.8 27B	3.0	10.0	0.0%	0		24.10s	95,181	9,588	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	6.5	10.0	50.0%	0		3.59s	7,776	284	2,140
Qwen3.8 27B	6.5	10.0	50.0%	0		1.14s	7,788	246	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	3.0	10.0	0.0%	0		7.28s	724	1,101	7,738
Qwen3.8 27B	7.7	10.0	66.7%	0		552ms	798	27	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	5.1	10.0	0.0%	0		7.10s	516	179	539
Qwen3.8 27B	4.2	9.9	0.0%	0		1.31s	522	126	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	9.8	10.0	100.0%	0		1.51s	699	90	675
Qwen3.8 27B	6.3	10.0	50.0%	0		582ms	711	72	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	3.5	4.4	33.3%	2		2.47s	696	285	1,576
Qwen3.8 27B	6.0	10.0	33.3%	0		1.25s	714	411	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	10.0	10.0	100.0%	0		4.77s	8,391	330	1,082
Qwen3.8 27B	10.0	10.0	100.0%	0		2.75s	7,932	273	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	3.0	10.0	0.0%	0		21.72s	204	20	11,028
Qwen3.8 27B	3.0	10.0	0.0%	0		703ms	210	27	0

Ganti Pasangan Perbandingan