AI BENCHY Compare

OpenAI: GPT-4o-mini vs Qwen: Qwen3 Coder Next

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-04-14

Metrik	GPT-4o-mini GPT-4o-mini none Rilis: 2024-07-18	Qwen3 Coder Next Qwen3 Coder Next medium Rilis: 2026-02-03

Metrik	GPT-4o-mini GPT-4o-mini none Rilis: 2024-07-18	Qwen3 Coder Next Qwen3 Coder Next medium Rilis: 2026-02-03
Skor	4.9	4.7
Peringkat	#85	#88
Konsistensi	9.9	8.7
Tes benar
Tingkat lulus per percobaan	22.2%	27.8%
Tes tidak stabil	0	3
Total Run	54	54
Biaya per hasil	0.122	0.240
Total Biaya	$0.005	$0.008
Harga input	$0.150 / 1M	$0.150 / 1M
Harga output	$0.600 / 1M	$0.800 / 1M
Token output	1,947	3,241
Token penalaran	0	0
Waktu respons (rata-rata)	2.00s	10.75s
Waktu respons (maks)	7.58s	81.80s
Waktu respons (total)	21.99s	129.01s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-4o-mini	4.8	10.0	25.0%	0		1.34s	186	0
Qwen3 Coder Next	3.5	8.1	16.7%	1		8.64s	1,252	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-4o-mini	3.0	8.7	0.0%	0		2.55s	347	0
Qwen3 Coder Next	4.7	1.6	66.7%	1		1.69s	300	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-4o-mini	3.0	10.0	0.0%	0		7.58s	568	0
Qwen3 Coder Next	3.0	10.0	0.0%	0		4.28s	317	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-4o-mini	10.0	10.0	100.0%	0		1.27s	183	0
Qwen3 Coder Next	6.5	10.0	50.0%	0		81.80s	246	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-4o-mini	3.0	10.0	0.0%	0		637ms	15	0
Qwen3 Coder Next	5.3	10.0	33.3%	0		638ms	25	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-4o-mini	4.0	10.0	0.0%	0		909ms	66	0
Qwen3 Coder Next	6.3	3.4	66.7%	1		1.39s	142	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-4o-mini	4.8	10.0	0.0%	0		1.27s	69	0
Qwen3 Coder Next	4.8	10.0	0.0%	0		7.34s	63	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-4o-mini	3.7	10.0	0.0%	0		1.30s	308	0
Qwen3 Coder Next	3.1	10.0	0.0%	0		2.30s	641	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-4o-mini	10.0	10.0	100.0%	0		2.51s	205	0
Qwen3 Coder Next	10.0	10.0	100.0%	0		2.64s	255	0

Perbandingan Cepat

Ganti Pasangan Perbandingan

Mercury 2nonevsQwen3 Coder Nextmedium Qwen3 Coder NextmediumvsMiMo-V2-Flashnone Qwen3 Coder NextmediumvsGrok 4.1 Fastnone GPT-5.4 NanononevsQwen3 Coder Nextmedium GPT-4o-mininonevsGLM 4.7 Flashmedium Nemotron 3 SupernoneTersedia gratisvsQwen3 Coder Nextmedium GPT-4o-mininonevsElephantmedium MiniMax M2.7mediumvsGPT-4o-mininone GPT-5.4 MininonevsQwen3 Coder Nextmedium ElephantnonevsQwen3 Coder Nextmedium gpt-oss-120bnoneTersedia gratisvsQwen3 Coder Nextmedium Mistral Small 4nonevsQwen3 Coder Nextmedium