AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs North Mini Code

Ringkasan

Perbandingan benchmark Seed-2.0-Lite vs North Mini Code: Seed-2.0-Lite unggul dalam skor rata-rata dengan 6.2 vs 5.8. North Mini Code memiliki biaya benchmark lebih rendah di $0.000 vs $0.019. Seed-2.0-Lite lebih cepat di 2.49s vs 106.18s, dengan tingkat keberhasilan 46.0% vs 50.8%.

Model yang direkomendasikan: Seed-2.0-Lite - It has the best score here (6.2), while responding about 42.7x faster than North Mini Code.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-18

Metrik	Seed-2.0-Lite Seed-2.0-Lite none Rilis: 2026-02-14	North Mini Code North Mini Code medium Rilis: 2026-06-18 Tersedia gratis

Metrik	Seed-2.0-Lite Seed-2.0-Lite none Rilis: 2026-02-14	North Mini Code North Mini Code medium Rilis: 2026-06-18 Tersedia gratis
Skor	6.2	5.8
Peringkat	#92	#107
Keandalan	10.0	8.5
Konsistensi	8.4	8.5
Tes benar
Tingkat lulus per percobaan	46.0%	50.8%
Tes tidak stabil	4	4
Total Run	63	55
Biaya per hasil	0.228	0.000
Total Biaya	$0.019	$0.000
Harga input	$0.250 / 1M	$0.000 / 1M
Harga output	$2.000 / 1M	$0.000 / 1M
Total token input	46,573	32,891
Token output	3,259	424,772
Token penalaran	0	1,021,489
Waktu respons (rata-rata)	2.49s	106.18s
Waktu respons (maks)	6.70s	357.05s
Waktu respons (total)	52.26s	2229.70s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#92 Seed-2.0-Lite

none

Biaya: $0.005
Waktu: 83.8s
Token: 2,311 tok

#107 North Mini Code

medium

Biaya: $0.000
Waktu: 51.8s
Token: 12,460 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.0	5.9	16.7%	2		2.43s	894	709	0
North Mini Code	8.4	10.0	75.0%	0		64.79s	324	64,441	68,535

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	5.6	10.0	33.3%	0		2.83s	8,215	410	0
North Mini Code	4.5	4.9	33.3%	2		320.43s	7,119	219,891	561,569

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.0	10.0	0.0%	0		6.59s	16,215	498	0
North Mini Code	2.8	1.6	33.3%	1		323.07s	14,760	0	151,500

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		1.82s	8,538	246	0
North Mini Code	10.0	10.0	100.0%	0		24.06s	6,819	240	2,659

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.6	7.2	22.2%	1		1.33s	939	17	0
North Mini Code	5.3	7.2	44.4%	1		71.37s	621	8,483	104,079

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		3.45s	570	294	0
North Mini Code	5.1	10.0	0.0%	0		25.08s	444	1,546	1,635

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		1.06s	810	73	0
North Mini Code	9.8	10.0	100.0%	0		15.43s	379	909	1,339

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	5.3	7.2	44.4%	1		2.78s	858	709	0
North Mini Code	3.3	10.0	0.0%	0		19.70s	543	2,215	2,485

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		3.94s	9,270	292	0
North Mini Code	10.0	10.0	100.0%	0		3.93s	1,776	41	563

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.0	10.0	0.0%	0		1.96s	264	11	0
North Mini Code	3.0	10.0	0.0%	0		305.02s	106	127,006	127,125

Perbandingan Cepat

Ganti Pasangan Perbandingan