AI BENCHY Compare

OpenAI: GPT-5.4 Mini vs Qwen: Qwen3 Coder Next

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-03-17

Metrik	GPT-5.4 Mini GPT-5.4 Mini none Rilis: 2026-03-17	Qwen3 Coder Next Qwen3 Coder Next none Rilis: 2026-02-03

Metrik	GPT-5.4 Mini GPT-5.4 Mini none Rilis: 2026-03-17	Qwen3 Coder Next Qwen3 Coder Next none Rilis: 2026-02-03
Peringkat	#66	#64
Skor	4.8	5.0
Konsistensi	8.6	10.0
Biaya per hasil	0.737	0.175
Total Biaya	$0.030	$0.007
Tes benar
Tingkat lulus per percobaan	31.4%	23.5%
Tes tidak stabil	3	0
Total Run	51	51
Token output	2,085	3,032
Token penalaran	0	0
Waktu respons (rata-rata)	1.17s	10.82s
Waktu respons (maks)	2.52s	45.14s
Waktu respons (total)	19.82s	118.99s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5.4 Mini	3.1	8.1	8.3%	1		929ms	654	0
Qwen3 Coder Next	3.6	10.0	0.0%	0		3.31s	1,321	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5.4 Mini	3.0	10.0	0.0%	0		2.52s	298	0
Qwen3 Coder Next	3.0	10.0	0.0%	0		45.14s	317	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5.4 Mini	10.0	10.0	100.0%	0		1.30s	222	0
Qwen3 Coder Next	6.5	10.0	50.0%	0		1.32s	246	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5.4 Mini	3.5	4.4	33.3%	2		937ms	88	0
Qwen3 Coder Next	5.3	10.0	33.3%	0		962ms	26	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5.4 Mini	4.8	10.0	0.0%	0		1.82s	174	0
Qwen3 Coder Next	10.0	10.0	100.0%	0		1.34s	152	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5.4 Mini	6.3	10.0	50.0%	0		728ms	101	0
Qwen3 Coder Next	4.8	10.0	0.0%	0		7.71s	63	0

Puzzle Solving	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5.4 Mini	5.4	10.0	33.3%	0		860ms	293	0
Qwen3 Coder Next	3.2	10.0	0.0%	0		22.86s	652	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5.4 Mini	3.0	10.0	0.0%	0		2.32s	255	0
Qwen3 Coder Next	10.0	10.0	100.0%	0		2.47s	255	0

Perbandingan Cepat

Ganti Pasangan Perbandingan

GPT-5.4 MininonevsQwen3 Coder Nextmedium GPT-5.4 MininonevsGLM 4.7 Flashmedium Qwen3 Coder NextnonevsGLM 4.7 Flashmedium GPT-5.4 MininonevsQwen3.5-9Bmedium Mistral Small 4mediumvsQwen3 Coder Nextnone Mistral Small 4mediumvsGPT-5.4 Mininone MiniMax M2.5mediumTersedia gratisvsQwen3 Coder Nextnone gpt-oss-120bmediumTersedia gratisvsQwen3 Coder Nextnone MiniMax M2.5mediumTersedia gratisvsGPT-5.4 Mininone Qwen3 Coder NextnonevsGrok 4.20 Multi-Agent Betamedium GPT-5 NanomediumvsQwen3 Coder Nextnone Mercury 2mediumvsQwen3 Coder Nextnone