Seed-2.0-Code (high) vs Qwen3.8 27B (low)

Model yang Dibandingkan

Model yang direkomendasikan Qwen3.8 27B (low)

It has the best score here (7.6), while costing about 16.4x less than Seed-2.0-Code (high).

Metrik	Seed-2.0-Code Seed-2.0-Code high Rilis: 2026-08-12	Qwen3.8 27B Qwen3.8 27B low Rilis: 2026-08-14 Tersedia gratis

Metrik	Seed-2.0-Code Seed-2.0-Code high Rilis: 2026-08-12	Qwen3.8 27B Qwen3.8 27B low Rilis: 2026-08-14 Tersedia gratis
Skor	7.5	7.6
Peringkat	#121	#117
Keandalan	9.0	10.0
Konsistensi	7.9	9.7
Percobaan	69/69	69/69
Tes benar
Tingkat lulus per percobaan	65.2%	68.1%
Tes tidak stabil	5	1
Total Run	69	69
Biaya per hasil	12.061	~0.589
Total Biaya	$1.448	~$0.089
Harga input	$0.500 / 1M	T/A
Harga output	$3.000 / 1M	T/A
Total token input	297,321	315,290
Token output	8,997	1,607
Token penalaran	423,853	207,536
Waktu respons (rata-rata)	124.87s	46.60s
Waktu respons (maks)	675.30s	376.04s
Waktu respons (total)	2871.96s	1071.83s
Parameter	~200B total (~20B aktif)	27.3B
Ketersediaan	Tertutup	Bobot tersedia

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

high

low

Kategori:

Tugas agen	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	10.0	10.0	100.0%	0		139.94s	215,351	1,811	20,464
Qwen3.8 27B	6.1	3.1	66.7%	1		211.32s	215,585	62	39,752

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	8.3	10.0	75.0%	0		35.07s	906	1,204	17,533
Qwen3.8 27B	10.0	10.0	100.0%	0		3.02s	984	183	2,016

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	6.2	6.5	55.6%	1		266.74s	6,750	432	124,956
Qwen3.8 27B	7.7	10.0	66.7%	0		140.92s	8,127	585	86,694

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	7.3	5.8	83.3%	1		144.87s	57,003	4,295	26,889
Qwen3.8 27B	10.0	10.0	100.0%	0		90.63s	69,687	66	37,791

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	10.0	10.0	100.0%	0		24.28s	8,034	246	4,782
Qwen3.8 27B	10.0	10.0	100.0%	0		8.03s	9,087	150	1,962

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	3.5	4.4	33.3%	2		419.73s	828	10	212,349
Qwen3.8 27B	5.3	10.0	33.3%	0		60.78s	1,014	12	31,872

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	4.6	7.8	0.0%	0		36.45s	382	131	2,577
Qwen3.8 27B	5.0	10.0	0.0%	0		5.37s	594	132	729

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	9.8	10.0	100.0%	0		11.26s	816	72	2,661
Qwen3.8 27B	10.0	10.0	100.0%	0		2.43s	855	48	915

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	7.8	9.3	66.7%	0		15.91s	786	585	4,473
Qwen3.8 27B	7.7	10.0	66.7%	0		4.91s	930	240	2,382

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	4.7	1.6	66.7%	1		35.09s	6,198	196	644
Qwen3.8 27B	3.0	10.0	0.0%	0		8.42s	8,145	15	1,350

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Seed-2.0-Code	3.0	10.0	0.0%	0		52.23s	267	15	6,525
Qwen3.8 27B	3.0	10.0	0.0%	0		12.64s	282	114	2,073

Ganti Pasangan Perbandingan