Inception: Mercury 2 vs Qwen: Qwen3 Coder Next

Qwen3 Coder Next (medium) unggul dalam skor rata-rata dengan 4.7 vs 4.6. Mercury 2 memiliki biaya benchmark lebih rendah di $0.030 vs $0.032. Mercury 2 lebih cepat di 829ms vs 9.61s, dengan tingkat keberhasilan 22.7% vs 27.3%.

Model yang direkomendasikanMercury 2Its score stays close to the best score here (4.6 vs 4.7), while responding about 11.6x faster than Qwen3 Coder Next (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-18

Metrik	Mercury 2 Mercury 2 none Rilis: 2026-02-24	Qwen3 Coder Next Qwen3 Coder Next medium Rilis: 2026-02-03

Metrik	Mercury 2 Mercury 2 none Rilis: 2026-02-24	Qwen3 Coder Next Qwen3 Coder Next medium Rilis: 2026-02-03
Skor	4.6	4.7
Peringkat	#185	#183
Keandalan	10.0	10.0
Konsistensi	9.2	9.0
Tes benar
Tingkat lulus per percobaan	22.7%	27.3%
Tes tidak stabil	2	3
Total Run	66	66
Biaya per hasil	0.734	0.793
Total Biaya	$0.030	$0.032
Harga input	$0.250 / 1M	$0.110 / 1M
Harga output	$0.750 / 1M	$0.800 / 1M
Total token input	88,704	148,194
Token output	9,564	19,069
Token penalaran	0	0
Waktu respons (rata-rata)	829ms	9.61s
Waktu respons (maks)	4.52s	81.80s
Waktu respons (total)	18.24s	153.69s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#185 Mercury 2

none

Biaya: $0.002
Waktu: 1.8s
Token: 1,514 tok

#183 Qwen3 Coder Next

medium

SVG tidak valid

Biaya: $0.000
Waktu: 300.0s
Token: 0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2	3.0	10.0	0.0%	0		483ms	631	286	0
Qwen3 Coder Next	3.5	8.1	16.7%	1		8.64s	645	1,252	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2	3.4	9.6	0.0%	0		1.03s	7,229	3,088	0
Qwen3 Coder Next	3.7	7.2	22.2%	1		924ms	7,185	336	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2	3.0	10.0	0.0%	0		2.56s	65,412	5,256	0
Qwen3 Coder Next	3.0	10.0	0.0%	0		14.65s	121,413	16,067	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2	7.3	5.9	83.3%	1		667ms	6,362	180	0
Qwen3 Coder Next	6.5	10.0	50.0%	0		81.80s	7,758	246	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2	5.3	7.2	44.4%	1		534ms	784	46	0
Qwen3 Coder Next	5.3	10.0	33.3%	0		638ms	753	25	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2	4.8	10.0	0.0%	0		628ms	495	159	0
Qwen3 Coder Next	6.3	3.4	66.7%	1		1.39s	498	142	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2	6.5	10.0	50.0%	0		551ms	691	82	0
Qwen3 Coder Next	6.3	10.0	50.0%	0		7.49s	684	63	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2	3.1	10.0	0.0%	0		535ms	694	251	0
Qwen3 Coder Next	3.0	10.0	0.0%	0		1.25s	678	671	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2	10.0	10.0	100.0%	0		1.27s	6,193	197	0
Qwen3 Coder Next	10.0	10.0	100.0%	0		2.64s	8,364	255	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2	3.0	10.0	0.0%	0		548ms	213	19	0
Qwen3 Coder Next	3.0	10.0	0.0%	0		399ms	216	12	0

Perbandingan Cepat

Ganti Pasangan Perbandingan