AI BENCHY Compare

North Mini Code vs OpenAI: GPT-4o-mini

Ringkasan

Perbandingan benchmark North Mini Code vs GPT-4o-mini: North Mini Code unggul dalam skor rata-rata dengan 5.8 vs 5.0. North Mini Code memiliki biaya benchmark lebih rendah di $0.000 vs $0.006. GPT-4o-mini lebih cepat di 1.77s vs 106.18s, dengan tingkat keberhasilan 50.8% vs 23.8%.

Model yang direkomendasikan: North Mini Code - It has the strongest score in this comparison (5.8) and the best overall balance of cost and response time across all 2 models.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-02

Metrik	North Mini Code North Mini Code medium Rilis: 2026-06-18 Tersedia gratis	GPT-4o-mini GPT-4o-mini none Rilis: 2024-07-18

Metrik	North Mini Code North Mini Code medium Rilis: 2026-06-18 Tersedia gratis	GPT-4o-mini GPT-4o-mini none Rilis: 2024-07-18
Skor	5.8	5.0
Peringkat	#110	#144
Keandalan	8.5	10.0
Konsistensi	8.5	9.9
Tes benar
Tingkat lulus per percobaan	50.8%	23.8%
Tes tidak stabil	4	0
Total Run	55	63
Biaya per hasil	0.000	0.119
Total Biaya	$0.000	$0.006
Harga input	$0.000 / 1M	$0.150 / 1M
Harga output	$0.000 / 1M	$0.600 / 1M
Total token input	32,891	31,518
Token output	424,772	1,982
Token penalaran	1,021,489	0
Waktu respons (rata-rata)	106.18s	1.77s
Waktu respons (maks)	357.05s	7.58s
Waktu respons (total)	2229.70s	24.80s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 North Mini Code

medium

Biaya: $0.000
Waktu: 51.8s
Token: 12,460 tok

#144 GPT-4o-mini

none

Biaya: $0.001
Waktu: 6.6s
Token: 742 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	8.4	10.0	75.0%	0		64.79s	324	64,441	68,535
GPT-4o-mini	4.8	10.0	25.0%	0		1.34s	618	186	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	4.5	4.9	33.3%	2		320.43s	7,119	219,891	561,569
GPT-4o-mini	3.2	9.6	0.0%	0		1.63s	7,314	367	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	2.8	1.6	33.3%	1		323.07s	14,760	0	151,500
GPT-4o-mini	3.0	10.0	0.0%	0		7.58s	8,298	568	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	10.0	10.0	100.0%	0		24.06s	6,819	240	2,659
GPT-4o-mini	10.0	10.0	100.0%	0		1.27s	7,161	183	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	5.3	7.2	44.4%	1		71.37s	621	8,483	104,079
GPT-4o-mini	3.0	10.0	0.0%	0		637ms	732	15	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	5.1	10.0	0.0%	0		25.08s	444	1,546	1,635
GPT-4o-mini	4.0	10.0	0.0%	0		909ms	480	66	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	9.8	10.0	100.0%	0		15.43s	379	909	1,339
GPT-4o-mini	6.3	10.0	50.0%	0		1.11s	666	69	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	3.3	10.0	0.0%	0		19.70s	543	2,215	2,485
GPT-4o-mini	3.5	10.0	0.0%	0		1.21s	651	308	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	10.0	10.0	100.0%	0		3.93s	1,776	41	563
GPT-4o-mini	10.0	10.0	100.0%	0		2.51s	5,400	205	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
North Mini Code	3.0	10.0	0.0%	0		305.02s	106	127,006	127,125
GPT-4o-mini	3.0	10.0	0.0%	0		794ms	198	15	0

Perbandingan Cepat

Ganti Pasangan Perbandingan