AI BENCHY Compare

OpenAI: GPT-5 Nano vs Qwen: Qwen3 Coder Next

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-04-29

Metrik	GPT-5 Nano GPT-5 Nano medium Rilis: 2025-08-07	Qwen3 Coder Next Qwen3 Coder Next none Rilis: 2026-02-03

Metrik	GPT-5 Nano GPT-5 Nano medium Rilis: 2025-08-07	Qwen3 Coder Next Qwen3 Coder Next none Rilis: 2026-02-03
Skor	6.3	5.1
Peringkat	#74	#113
Keandalan	T/A	T/A
Konsistensi	6.5	9.7
Tes benar
Tingkat lulus per percobaan	59.3%	25.9%
Tes tidak stabil	8	1
Total Run	54	54
Biaya per hasil	0.942	0.188
Total Biaya	$0.066	$0.008
Harga input	$0.050 / 1M	$0.140 / 1M
Harga output	$0.400 / 1M	$0.800 / 1M
Token output	4,980	3,617
Token penalaran	156,288	0
Waktu respons (rata-rata)	44.13s	10.18s
Waktu respons (maks)	204.02s	45.14s
Waktu respons (total)	485.47s	122.13s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	6.5	7.9	58.3%	1		25.50s	1,221	21,184
Qwen3 Coder Next	3.6	10.0	0.0%	0		3.31s	1,321	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	6.7	3.5	66.7%	1		40.73s	480	12,992
Qwen3 Coder Next	7.3	3.7	66.7%	1		3.14s	585	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	10.0	10.0	100.0%	0		65.96s	578	17,984
Qwen3 Coder Next	3.0	10.0	0.0%	0		45.14s	317	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	3.7	1.7	50.0%	2		21.42s	453	10,560
Qwen3 Coder Next	6.5	10.0	50.0%	0		1.32s	246	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	5.2	4.4	55.6%	2		204.02s	237	64,448
Qwen3 Coder Next	5.3	10.0	33.3%	0		962ms	26	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	4.1	10.0	0.0%	0		17.51s	202	4,608
Qwen3 Coder Next	10.0	10.0	100.0%	0		1.34s	152	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	8.5	6.8	83.3%	1		11.90s	382	4,096
Qwen3 Coder Next	4.8	10.0	0.0%	0		7.71s	63	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	5.3	7.2	44.4%	1		19.81s	869	13,440
Qwen3 Coder Next	3.2	10.0	0.0%	0		22.86s	652	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	10.0	10.0	100.0%	0		33.30s	558	6,976
Qwen3 Coder Next	10.0	10.0	100.0%	0		2.47s	255	0

Perbandingan Cepat

Ganti Pasangan Perbandingan

GPT-5 NanomediumvsGLM 5V Turbonone GPT-5 NanomediumvsQwen3.5-Flashnone Gemma 4 26B A4BnoneTersedia gratisvsGPT-5 Nanomedium Seed-2.0-LitenonevsGPT-5 Nanomedium Gemini 2.5 FlashnonevsGPT-5 Nanomedium Nemotron 3 Nano Omni 30b A3b ReasoningmediumTersedia gratisvsQwen3 Coder Nextnone Elephant AlphamediumvsQwen3 Coder Nextnone GPT-5 NanomediumvsQwen3.5-35B-A3Bnone MiniMax M2.7mediumvsQwen3 Coder Nextnone DeepSeek V4 PrononevsGPT-5 Nanomedium GPT-5 NanomediumvsMiMo-V2-Omninone GPT-5 NanomediumvsQwen3.6 27Bnone