KAT-Coder-Air V2.5 (medium) vs Inkling Small (low)

Model yang direkomendasikan Inkling Small (low)

It has the best score here (5.7), while responding about 4.0x faster than KAT-Coder-Air V2.5 (medium).

Perbandingan terperinci

Metrik	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium Rilis: 2026-07-14	Inkling Small Inkling Small low Rilis: 2026-08-01

Metrik	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium Rilis: 2026-07-14	Inkling Small Inkling Small low Rilis: 2026-08-01
Skor	5.6	5.7
Peringkat	#173	#164
Keandalan	9.9	10.0
Konsistensi	8.9	8.6
Tes benar
Tingkat lulus per percobaan	45.5%	50.0%
Tes tidak stabil	3	4
Total Run	66	66
Biaya per hasil	0.593	0.648
Total Biaya	$0.048	$0.059
Harga input	$0.150 / 1M	$0.500 / 1M
Harga output	$0.600 / 1M	$1.200 / 1M
Total token input	51,472	81,438
Token output	7,822	2,715
Token penalaran	58,352	11,938
Waktu respons (rata-rata)	8.42s	2.08s
Waktu respons (maks)	48.19s	5.82s
Waktu respons (total)	185.24s	45.87s

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

medium

low

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	8.7	8.0	91.7%	1		3.79s	672	549	4,194
Inkling Small	9.2	8.4	91.7%	1		1.81s	702	240	1,831

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	3.6	7.0	22.2%	1		23.37s	7,893	5,199	29,973
Inkling Small	4.6	5.0	33.3%	2		3.70s	7,374	375	4,332

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	6.5	10.0	50.0%	0		19.56s	23,854	435	6,811
Inkling Small	3.0	10.0	0.0%	0		4.08s	55,293	893	1,420

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	6.5	10.0	50.0%	0		3.65s	7,776	268	1,881
Inkling Small	10.0	10.0	100.0%	0		1.25s	7,068	216	372

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	3.0	10.0	0.0%	0		4.87s	771	487	4,454
Inkling Small	5.3	10.0	33.3%	0		926ms	795	68	569

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	5.0	10.0	0.0%	0		9.81s	516	189	557
Inkling Small	5.3	10.0	0.0%	0		1.42s	501	141	389

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	10.0	10.0	100.0%	0		1.50s	699	93	730
Inkling Small	9.9	10.0	100.0%	0		1.89s	708	93	902

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	3.6	7.2	22.2%	1		1.87s	696	265	1,184
Inkling Small	5.3	7.2	44.4%	1		1.56s	714	315	1,225

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	10.0	10.0	100.0%	0		4.77s	8,391	317	906
Inkling Small	3.0	10.0	0.0%	0		2.21s	8,064	339	84

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	3.0	10.0	0.0%	0		15.74s	204	20	7,662
Inkling Small	3.0	10.0	0.0%	0		2.00s	219	35	814

Ganti Pasangan Perbandingan