Mercury 2.5 (low) vs Qwen3.5-9B

Model yang Dibandingkan

Model yang direkomendasikan Mercury 2.5 (low)

It has the best score here (5.1), while costing about 1.9x less than Qwen3.5-9B.

Metrik	Mercury 2.5 Mercury 2.5 low Rilis: 2026-09-08	Qwen3.5-9B Qwen3.5-9B none Rilis: 2026-03-02

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

low

none

Reached the allocated time limit (300 seconds) without receiving showcase output.

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	6.9	7.9	66.7%	1		799ms	772	209	2,969
Qwen3.5-9B	3.1	9.9	0.0%	0		1.71s	696	582	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	5.5	10.0	33.3%	0		972ms	7,909	521	2,269
Qwen3.5-9B	3.9	7.8	11.1%	1		5.60s	7,913	1,042	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.0	10.0	0.0%	0		5.16s	107,683	3,750	11,351
Qwen3.5-9B	3.0	10.0	0.0%	0		193.98s	116,763	34,787	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	6.5	10.0	50.0%	0		1.06s	8,322	739	1,499
Qwen3.5-9B	10.0	10.0	100.0%	0		847ms	7,788	249	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.6	7.2	22.2%	1		846ms	851	57	2,265
Qwen3.5-9B	3.0	10.0	0.0%	0		636ms	798	24	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	4.4	9.9	0.0%	0		819ms	525	99	748
Qwen3.5-9B	4.4	9.9	0.0%	0		552ms	522	99	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	2.9	6.0	16.7%	1		972ms	518	48	1,026
Qwen3.5-9B	6.5	10.0	50.0%	0		514ms	711	75	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	5.9	4.5	66.7%	2		792ms	768	249	2,214
Qwen3.5-9B	3.2	10.0	0.0%	0		621ms	714	347	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	9.8	10.0	100.0%	0		2.72s	10,440	388	2,537
Qwen3.5-9B	10.0	10.0	100.0%	0		1.27s	8,301	273	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.0	10.0	0.0%	0		782ms	232	23	758
Qwen3.5-9B	3.0	10.0	0.0%	0		2.32s	210	6	0

Ganti Pasangan Perbandingan