AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs DeepSeek: DeepSeek V4 Pro

Ringkasan

Perbandingan benchmark Seed-2.0-Lite vs DeepSeek V4 Pro: DeepSeek V4 Pro unggul dalam skor rata-rata dengan 6.0 vs 5.8. Seed-2.0-Lite memiliki biaya benchmark lebih rendah di $0.019 vs $0.079. Seed-2.0-Lite lebih cepat di 2.49s vs 65.21s, dengan tingkat keberhasilan 46.0% vs 52.4%.

Model yang direkomendasikan: Seed-2.0-Lite - Its score stays close to the best score here (5.8 vs 6.0), while costing about 4.3x less than DeepSeek V4 Pro.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-10

Metrik	Seed-2.0-Lite Seed-2.0-Lite none Rilis: 2026-02-14	DeepSeek V4 Pro DeepSeek V4 Pro high Rilis: 2026-04-24

Metrik	Seed-2.0-Lite Seed-2.0-Lite none Rilis: 2026-02-14	DeepSeek V4 Pro DeepSeek V4 Pro high Rilis: 2026-04-24
Skor	5.8	6.0
Peringkat	#111	#104
Keandalan	10.0	9.0
Konsistensi	8.4	7.6
Tes benar
Tingkat lulus per percobaan	46.0%	52.4%
Tes tidak stabil	4	6
Total Run	63	63
Biaya per hasil	0.228	2.869
Total Biaya	$0.019	$0.079
Harga input	$0.250 / 1M	$0.435 / 1M
Harga output	$2.000 / 1M	$0.870 / 1M
Total token input	46,573	32,240
Token output	3,259	12,250
Token penalaran	0	72,257
Waktu respons (rata-rata)	2.49s	65.21s
Waktu respons (maks)	6.70s	358.35s
Waktu respons (total)	52.26s	1304.19s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#111 Seed-2.0-Lite

none

Cost: $0.005
Time: 83.8s
Tokens: 2,311 tok

#104 DeepSeek V4 Pro

high

Cost: $0.023
Time: 257.6s
Tokens: 14,870 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.0	5.9	16.7%	2		2.43s	894	709	0
DeepSeek V4 Pro	6.4	7.9	58.3%	1		16.53s	448	71	3,617

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	5.6	10.0	33.3%	0		2.83s	8,215	410	0
DeepSeek V4 Pro	3.3	6.4	11.1%	1		118.23s	1,966	111	20,940

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.0	10.0	0.0%	0		6.59s	16,215	498	0
DeepSeek V4 Pro	10.0	10.0	100.0%	0		65.02s	14,016	465	5,914

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		1.82s	8,538	246	0
DeepSeek V4 Pro	7.3	5.9	83.3%	1		23.62s	5,633	229	1,710

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.6	7.2	22.2%	1		1.33s	939	17	0
DeepSeek V4 Pro	2.9	7.2	11.1%	1		205.66s	430	10,529	28,089

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		3.45s	570	294	0
DeepSeek V4 Pro	6.1	3.1	66.7%	1		25.09s	314	76	1,152

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		1.06s	810	73	0
DeepSeek V4 Pro	10.0	10.0	100.0%	0		41.16s	627	205	2,416

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	5.3	7.2	44.4%	1		2.78s	858	709	0
DeepSeek V4 Pro	5.9	7.2	55.6%	1		34.84s	544	139	4,019

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	10.0	10.0	100.0%	0		3.94s	9,270	292	0
DeepSeek V4 Pro	10.0	10.0	100.0%	0		21.33s	8,079	372	593

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Lite	3.0	10.0	0.0%	0		1.96s	264	11	0
DeepSeek V4 Pro	3.0	10.0	0.0%	0		39.14s	183	53	3,807

Perbandingan Cepat

Ganti Pasangan Perbandingan