AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs OpenAI: GPT-5.6 Luna

Ringkasan

Perbandingan benchmark Seed-2.0-Lite vs GPT-5.6 Luna (low): Skor rata-rata hampir imbang di 6.2 vs 6.2. Seed-2.0-Lite memiliki biaya benchmark lebih rendah di $0.019 vs $0.141. Seed-2.0-Lite lebih cepat di 2.49s vs 4.35s, dengan tingkat keberhasilan 46.0% vs 57.1%.

Model yang direkomendasikan: Seed-2.0-Lite - It has the best score here (6.2), while costing about 7.7x less than GPT-5.6 Luna (low).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-09

Metrik	Seed-2.0-Lite Seed-2.0-Lite none Rilis: 2026-02-14	GPT-5.6 Luna GPT-5.6 Luna low Rilis: 2026-07-09

Metrik	Seed-2.0-Lite Seed-2.0-Lite none Rilis: 2026-02-14	GPT-5.6 Luna GPT-5.6 Luna low Rilis: 2026-07-09
Skor	6.2	6.2
Peringkat	#106	#107
Keandalan	10.0	10.0
Konsistensi	8.4	8.5
Tes benar
Tingkat lulus per percobaan	46.0%	57.1%
Tes tidak stabil	4	4
Total Run	63	63
Biaya per hasil	0.228	1.404
Total Biaya	$0.019	$0.141
Harga input	$0.250 / 1M	$1.000 / 1M
Harga output	$2.000 / 1M	$6.000 / 1M
Total token input	46,573	34,218
Token output	3,259	2,110
Token penalaran	0	15,571
Waktu respons (rata-rata)	2.49s	4.35s
Waktu respons (maks)	6.70s	18.06s
Waktu respons (total)	52.26s	91.45s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#106 Seed-2.0-Lite

none

Biaya: $0.005
Waktu: 83.8s
Token: 2,311 tok

#107 GPT-5.6 Luna

low

Biaya: $0.011
Waktu: 10.2s
Token: 1,897 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.0	5.9	16.7%	2		2.43s	894	709	0
GPT-5.6 Luna	8.3	10.0	75.0%	0		2.21s	606	186	722

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	5.6	10.0	33.3%	0		2.83s	8,215	410	0
GPT-5.6 Luna	5.5	10.0	33.3%	0		4.61s	7,302	557	3,535

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.0	10.0	0.0%	0		6.59s	16,215	498	0
GPT-5.6 Luna	2.8	1.6	33.3%	1		7.99s	11,019	300	1,060

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		1.82s	8,538	246	0
GPT-5.6 Luna	10.0	10.0	100.0%	0		2.14s	7,140	234	292

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.6	7.2	22.2%	1		1.33s	939	17	0
GPT-5.6 Luna	3.6	7.2	22.2%	1		10.05s	723	70	6,718

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		3.45s	570	294	0
GPT-5.6 Luna	5.0	10.0	0.0%	0		2.25s	477	122	169

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		1.06s	810	73	0
GPT-5.6 Luna	8.5	6.8	83.3%	1		2.04s	660	93	259

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	5.3	7.2	44.4%	1		2.78s	858	709	0
GPT-5.6 Luna	7.6	7.2	77.8%	1		3.59s	642	271	1,207

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		3.94s	9,270	292	0
GPT-5.6 Luna	10.0	10.0	100.0%	0		4.43s	5,454	250	177

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.0	10.0	0.0%	0		1.96s	264	11	0
GPT-5.6 Luna	3.0	10.0	0.0%	0		4.86s	195	27	1,432

Perbandingan Cepat

Ganti Pasangan Perbandingan

Gemini 2.5 FlashnonevsGPT-5.6 Lunalow Gemini 3.1 Flash LiteminimalvsGPT-5.6 Lunalow Seed-2.0-LitenonevsGemini 3.1 Flash Liteminimal Gemini 3.1 Flash LitenonevsGPT-5.6 Lunalow Seed-2.0-LitenonevsQwen3.5-35B-A3Bmedium GPT-5.6 LunalowvsQwen3.5-Flashnone GPT-5.6 LunalowvsQwen3.5-35B-A3Bmedium Seed-2.0-LitenonevsGemma 4 31BmediumTersedia gratis Gemma 4 31BnoneTersedia gratisvsGPT-5.6 Lunalow Gemma 4 31BmediumTersedia gratisvsGPT-5.6 Lunalow Seed-2.0-LitenonevsNemotron 3 SupermediumTersedia gratis Nemotron 3 SupermediumTersedia gratisvsGPT-5.6 Lunalow