KAT-Coder-Air V2.5 (high) vs Inkling Small (low)

Model yang direkomendasikan Inkling Small (low)

It has the best score here (5.7), while responding about 7.6x faster than KAT-Coder-Air V2.5 (high).

Perbandingan terperinci

Metrik	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Rilis: 2026-07-14	Inkling Small Inkling Small low Rilis: 2026-08-01

Metrik	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Rilis: 2026-07-14	Inkling Small Inkling Small low Rilis: 2026-08-01
Skor	5.6	5.7
Peringkat	#168	#164
Keandalan	9.9	10.0
Konsistensi	7.7	8.6
Tes benar
Tingkat lulus per percobaan	43.9%	50.0%
Tes tidak stabil	6	4
Total Run	66	66
Biaya per hasil	1.097	0.648
Total Biaya	$0.077	$0.059
Harga input	$0.150 / 1M	$0.500 / 1M
Harga output	$0.600 / 1M	$1.200 / 1M
Total token input	50,470	81,438
Token output	3,957	2,715
Token penalaran	111,374	11,938
Waktu respons (rata-rata)	15.90s	2.08s
Waktu respons (maks)	118.35s	5.82s
Waktu respons (total)	349.71s	45.87s

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

high

SVG tidak valid

low

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	6.9	5.8	75.0%	2		2.49s	615	204	1,290
Inkling Small	9.2	8.4	91.7%	1		1.81s	702	240	1,831

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	4.3	7.3	11.1%	1		39.07s	6,948	1,166	55,883
Inkling Small	4.6	5.0	33.3%	2		3.70s	7,374	375	4,332

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	6.5	10.0	50.0%	0		74.48s	23,854	485	28,559
Inkling Small	3.0	10.0	0.0%	0		4.08s	55,293	893	1,420

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	6.5	10.0	50.0%	0		3.59s	7,776	284	2,140
Inkling Small	10.0	10.0	100.0%	0		1.25s	7,068	216	372

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	2.9	7.2	11.1%	1		7.47s	771	914	8,602
Inkling Small	5.3	10.0	33.3%	0		926ms	795	68	569

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	5.1	10.0	0.0%	0		7.10s	516	179	539
Inkling Small	5.3	10.0	0.0%	0		1.42s	501	141	389

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	9.8	10.0	100.0%	0		1.51s	699	90	675
Inkling Small	9.9	10.0	100.0%	0		1.89s	708	93	902

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	3.5	4.4	33.3%	2		2.47s	696	285	1,576
Inkling Small	5.3	7.2	44.4%	1		1.56s	714	315	1,225

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	10.0	10.0	100.0%	0		4.77s	8,391	330	1,082
Inkling Small	3.0	10.0	0.0%	0		2.21s	8,064	339	84

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
KAT-Coder-Air V2.5	3.0	10.0	0.0%	0		21.72s	204	20	11,028
Inkling Small	3.0	10.0	0.0%	0		2.00s	219	35	814

Ganti Pasangan Perbandingan