AI BENCHY Compare

North Mini Code vs Kwaipilot: KAT-Coder-Air V2.5

Ringkasan

North Mini Code (medium) unggul dalam skor rata-rata dengan 5.8 vs 4.9. North Mini Code (medium) memiliki biaya benchmark lebih rendah di $0.000 vs $0.037. KAT-Coder-Air V2.5 lebih cepat di 6.99s vs 106.18s, dengan tingkat keberhasilan 50.8% vs 38.1%.

Model yang direkomendasikanNorth Mini Code (medium)It has the strongest score in this comparison (5.8) and the best overall balance of cost and response time across all 2 models.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik	North Mini Code North Mini Code medium Rilis: 2026-06-18 Tersedia gratis	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none Rilis: 2026-07-14

Metrik	North Mini Code North Mini Code medium Rilis: 2026-06-18 Tersedia gratis	KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none Rilis: 2026-07-14
Skor	5.8	4.9
Peringkat	#131	#168
Keandalan	8.5	10.0
Konsistensi	8.5	7.1
Tes benar
Tingkat lulus per percobaan	50.8%	38.1%
Tes tidak stabil	4	7
Total Run	55	63
Biaya per hasil	0.000	0.724
Total Biaya	$0.000	$0.037
Harga input	$0.000 / 1M	$0.150 / 1M
Harga output	$0.000 / 1M	$0.600 / 1M
Total token input	32,891	41,328
Token output	424,772	49,933
Token penalaran	1,021,489	0
Waktu respons (rata-rata)	106.18s	6.99s
Waktu respons (maks)	357.05s	24.94s
Waktu respons (total)	2229.70s	146.78s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#131 North Mini Code

medium

Biaya: $0.000
Waktu: 51.8s
Token: 12,460 tok

#168 KAT-Coder-Air V2.5

none

Biaya: $0.002
Waktu: 14.5s
Token: 2,619 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	8.4	10.0	75.0%	0		64.79s	324	64,441	68,535
KAT-Coder-Air V2.5	5.3	5.6	50.0%	2		2.68s	672	3,044	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	4.5	4.9	33.3%	2		320.43s	7,119	219,891	561,569
KAT-Coder-Air V2.5	3.3	9.6	0.0%	0		14.31s	6,472	16,918	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	2.8	1.6	33.3%	1		323.07s	14,760	0	151,500
KAT-Coder-Air V2.5	4.7	1.6	66.7%	1		24.94s	15,131	6,788	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	10.0	10.0	100.0%	0		24.06s	6,819	240	2,659
KAT-Coder-Air V2.5	6.3	5.8	66.7%	1		2.66s	7,776	1,268	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	5.3	7.2	44.4%	1		71.37s	621	8,483	104,079
KAT-Coder-Air V2.5	2.9	7.2	11.1%	1		6.24s	771	7,818	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	5.1	10.0	0.0%	0		25.08s	444	1,546	1,635
KAT-Coder-Air V2.5	5.0	10.0	0.0%	0		12.02s	516	656	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	9.8	10.0	100.0%	0		15.43s	379	909	1,339
KAT-Coder-Air V2.5	9.9	10.0	100.0%	0		1.75s	699	858	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	3.3	10.0	0.0%	0		19.70s	543	2,215	2,485
KAT-Coder-Air V2.5	2.9	4.4	22.2%	2		1.84s	696	1,255	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	10.0	10.0	100.0%	0		3.93s	1,776	41	563
KAT-Coder-Air V2.5	10.0	10.0	100.0%	0		5.13s	8,391	1,560	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	3.0	10.0	0.0%	0		305.02s	106	127,006	127,125
KAT-Coder-Air V2.5	3.0	10.0	0.0%	0		17.96s	204	9,768	0

Perbandingan Cepat

Ganti Pasangan Perbandingan