KAT-Coder-Pro V2.5 (high) vs Muse Glimmer 30B (low)

Model yang direkomendasikan Muse Glimmer 30B (low)

Its score stays close to the best score here (7.1 vs 7.2), while costing about 2.6x less than KAT-Coder-Pro V2.5 (high).

Perbandingan terperinci

Metrik	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Rilis: 2026-07-14	Muse Glimmer 30B Muse Glimmer 30B low Rilis: 2026-08-11

Metrik	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Rilis: 2026-07-14	Muse Glimmer 30B Muse Glimmer 30B low Rilis: 2026-08-11
Skor	7.2	7.1
Peringkat	#92	#99
Keandalan	10.0	10.0
Konsistensi	7.8	8.2
Cakupan benchmark	22/22 tes · 66/66 percobaan	22/22 tes · 66/66 percobaan
Tes benar
Tingkat lulus per percobaan	63.6%	63.6%
Tes tidak stabil	6	5
Total Run	66	66
Biaya per hasil	4.378	1.685
Total Biaya	$0.482	$0.186
Harga input	$0.740 / 1M	$0.350 / 1M
Harga output	$2.960 / 1M	$1.500 / 1M
Total token input	106,076	130,300
Token output	9,071	33,907
Token penalaran	127,093	61,571
Waktu respons (rata-rata)	20.83s	18.51s
Waktu respons (maks)	199.97s	234.92s
Waktu respons (total)	458.31s	407.22s

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

high

low

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	7.0	8.0	66.7%	1		3.17s	672	447	2,716
Muse Glimmer 30B	8.7	8.0	91.7%	1		3.57s	810	1,054	2,240

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	6.4	7.9	44.4%	1		22.00s	7,893	422	20,461
Muse Glimmer 30B	8.1	9.9	66.7%	0		16.52s	7,419	2,759	10,173

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	7.3	5.8	83.3%	1		106.70s	78,458	6,956	60,306
Muse Glimmer 30B	3.8	5.8	33.3%	1		131.97s	102,271	24,417	33,400

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		4.13s	7,776	278	1,960
Muse Glimmer 30B	10.0	10.0	100.0%	0		4.17s	7,065	1,219	1,841

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	2.9	4.4	22.2%	2		35.33s	771	33	35,701
Muse Glimmer 30B	3.5	4.4	33.3%	2		10.49s	873	3,107	6,126

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	5.1	10.0	0.0%	0		3.27s	516	139	647
Muse Glimmer 30B	5.0	10.0	0.0%	0		2.50s	525	33	542

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	9.9	10.0	100.0%	0		2.67s	699	84	976
Muse Glimmer 30B	8.4	6.9	83.3%	1		3.60s	765	139	1,467

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	8.2	7.2	88.9%	1		3.38s	696	428	1,936
Muse Glimmer 30B	7.7	10.0	66.7%	0		5.06s	795	545	2,721

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		28.04s	8,391	268	896
Muse Glimmer 30B	10.0	10.0	100.0%	0		5.04s	9,546	385	803

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		5.22s	204	16	1,494
Muse Glimmer 30B	3.0	10.0	0.0%	0		9.71s	231	249	2,258

Ganti Pasangan Perbandingan