Seed-2.0-Code vs Mercury 2.5 (low)

Model yang Dibandingkan

Model yang direkomendasikan Mercury 2.5 (low)

Its score stays close to the best score here (5.1 vs 5.3), while costing about 14.2x less than Seed-2.0-Code.

Metrik	Seed-2.0-Code Seed-2.0-Code none Rilis: 2026-08-12	Mercury 2.5 Mercury 2.5 low Rilis: 2026-09-08

Metrik	Seed-2.0-Code Seed-2.0-Code none Rilis: 2026-08-12	Mercury 2.5 Mercury 2.5 low Rilis: 2026-09-08
Skor	5.3	5.1
Peringkat	#288	#300
Keandalan	8.6	9.8
Konsistensi	8.1	8.1
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	36.4%	39.4%
Tes tidak stabil	5	5
Total Run	66	66
Biaya per hasil	2.503	0.177
Total Biaya	$0.151	$0.011
Harga input	$0.500 / 1M	$0.040 / 1M
Harga output	$3.000 / 1M	$0.150 / 1M
Total token input	159,749	138,020
Token output	23,433	6,083
Token penalaran	0	27,636
Waktu respons (rata-rata)	14.67s	1.35s
Waktu respons (maks)	132.84s	7.48s
Waktu respons (total)	322.71s	29.74s
Parameter	~200B total (~20B aktif)	~100B
Ketersediaan	Tertutup	Tertutup

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

none

low

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	3.0	5.9	16.7%	2		5.06s	894	1,435	0
Mercury 2.5	6.9	7.9	66.7%	1		799ms	772	209	2,969

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	3.6	9.8	0.0%	0		13.42s	7,230	505	0
Mercury 2.5	5.5	10.0	33.3%	0		972ms	7,909	521	2,269

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	3.0	10.0	0.0%	0		78.38s	130,859	19,874	0
Mercury 2.5	3.0	10.0	0.0%	0		5.16s	107,683	3,750	11,351

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	10.0	10.0	100.0%	0		4.53s	8,028	246	0
Mercury 2.5	6.5	10.0	50.0%	0		1.06s	8,322	739	1,499

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	3.5	4.4	33.3%	2		1.91s	948	18	0
Mercury 2.5	3.6	7.2	22.2%	1		846ms	851	57	2,265

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	5.0	10.0	0.0%	0		2.82s	570	247	0
Mercury 2.5	4.4	9.9	0.0%	0		819ms	525	99	748

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	6.2	5.8	66.7%	1		1.80s	810	254	0
Mercury 2.5	2.9	6.0	16.7%	1		972ms	518	48	1,026

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	7.7	10.0	66.7%	0		10.04s	858	592	0
Mercury 2.5	5.9	4.5	66.7%	2		792ms	768	249	2,214

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	10.0	10.0	100.0%	0		48.81s	9,288	247	0
Mercury 2.5	9.8	10.0	100.0%	0		2.72s	10,440	388	2,537

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	3.0	10.0	0.0%	0		5.36s	264	15	0
Mercury 2.5	3.0	10.0	0.0%	0		782ms	232	23	758

Ganti Pasangan Perbandingan