Mercury 2.5 (low) vs Qwen3.6 35B A3B

Model yang Dibandingkan

Model yang direkomendasikan Mercury 2.5 (low)

Its score stays close to the best score here (5.1 vs 5.3), while costing about 4.8x less than Qwen3.6 35B A3B.

Metrik	Mercury 2.5 Mercury 2.5 low Rilis: 2026-09-08	Qwen3.6 35B A3B Qwen3.6 35B A3B none Rilis: 2026-04-20

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

low

none

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	6.9	7.9	66.7%	1		799ms	772	209	2,969
Qwen3.6 35B A3B	3.6	7.6	16.7%	1		2.10s	696	1,571	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	5.5	10.0	33.3%	0		972ms	7,909	521	2,269
Qwen3.6 35B A3B	5.5	10.0	33.3%	0		8.77s	7,911	11,161	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.0	10.0	0.0%	0		5.16s	107,683	3,750	11,351
Qwen3.6 35B A3B	3.8	5.8	33.3%	1		39.54s	74,650	19,202	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	6.5	10.0	50.0%	0		1.06s	8,322	739	1,499
Qwen3.6 35B A3B	10.0	10.0	100.0%	0		1.46s	7,788	248	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.6	7.2	22.2%	1		846ms	851	57	2,265
Qwen3.6 35B A3B	2.9	7.2	11.1%	1		7.76s	792	10,329	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	4.4	9.9	0.0%	0		819ms	525	99	748
Qwen3.6 35B A3B	4.4	3.0	33.3%	1		3.51s	520	1,545	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	2.9	6.0	16.7%	1		972ms	518	48	1,026
Qwen3.6 35B A3B	6.2	5.8	66.7%	1		1.86s	709	1,264	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	5.9	4.5	66.7%	2		792ms	768	249	2,214
Qwen3.6 35B A3B	3.2	9.9	0.0%	0		1.07s	714	573	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	9.8	10.0	100.0%	0		2.72s	10,440	388	2,537
Qwen3.6 35B A3B	3.0	10.0	0.0%	0		0ms	0	0	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.0	10.0	0.0%	0		782ms	232	23	758
Qwen3.6 35B A3B	3.0	10.0	0.0%	0		414ms	210	12	0

Ganti Pasangan Perbandingan