AI BENCHY Compare

OpenAI: GPT-5 Nano vs Qwen: Qwen3.6 27B

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-05-21

Metrik	GPT-5 Nano GPT-5 Nano medium Rilis: 2025-08-07	Qwen3.6 27B Qwen3.6 27B medium Rilis: 2026-04-20

Metrik	GPT-5 Nano GPT-5 Nano medium Rilis: 2025-08-07	Qwen3.6 27B Qwen3.6 27B medium Rilis: 2026-04-20
Skor	6.2	6.8
Peringkat	#92	#78
Keandalan	10.0	10.0
Konsistensi	7.0	8.0
Tes benar
Tingkat lulus per percobaan	57.9%	61.4%
Tes tidak stabil	7	5
Total Run	57	57
Biaya per hasil	0.856	2.543
Total Biaya	$0.069	$0.229
Harga input	$0.050 / 1M	$0.320 / 1M
Harga output	$0.400 / 1M	$3.200 / 1M
Token output	5,214	8,680
Token penalaran	162,432	96,890
Waktu respons (rata-rata)	42.13s	52.13s
Waktu respons (maks)	204.02s	168.22s
Waktu respons (total)	505.59s	990.48s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	6.5	7.9	58.3%	1		25.50s	1,221	21,184
Qwen3.6 27B	8.3	10.0	75.0%	0		12.62s	582	4,311

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	6.7	3.5	66.7%	1		40.73s	480	12,992
Qwen3.6 27B	10.0	10.0	100.0%	0		168.22s	433	17,861

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	10.0	10.0	100.0%	0		65.96s	578	17,984
Qwen3.6 27B	7.0	3.7	66.7%	1		83.07s	2,088	14,689

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	3.7	1.7	50.0%	2		21.42s	453	10,560
Qwen3.6 27B	3.5	1.4	50.0%	2		37.30s	568	9,404

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	5.2	4.4	55.6%	2		204.02s	237	64,448
Qwen3.6 27B	2.9	7.2	11.1%	1		73.38s	3,510	20,352

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	4.1	10.0	0.0%	0		17.51s	202	4,608
Qwen3.6 27B	6.5	3.4	66.7%	1		39.53s	81	3,045

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	9.8	10.0	100.0%	0		11.90s	382	4,096
Qwen3.6 27B	10.0	10.0	100.0%	0		37.96s	346	6,548

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	5.3	7.2	44.4%	1		19.81s	869	13,440
Qwen3.6 27B	7.7	10.0	66.7%	0		60.21s	281	11,919

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	10.0	10.0	100.0%	0		33.30s	558	6,976
Qwen3.6 27B	10.0	10.0	100.0%	0		16.88s	390	2,954

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
GPT-5 Nano	3.0	10.0	0.0%	0		20.13s	234	6,144
Qwen3.6 27B	3.0	10.0	0.0%	0		80.99s	401	5,807

Perbandingan Cepat

Ganti Pasangan Perbandingan

Gemma 4 26B A4BnoneTersedia gratisvsGPT-5 Nanomedium Gemini 3.1 Flash LiteminimalvsQwen3.6 27Bmedium Gemini 2.5 FlashnonevsGPT-5 Nanomedium GPT-5.5nonevsQwen3.6 27Bmedium DeepSeek V4 ProhighvsQwen3.6 27Bmedium GPT-5 NanomediumvsMiMo-V2-Omninone DeepSeek V4 PrononevsGPT-5 Nanomedium Gemma 4 31BnoneTersedia gratisvsQwen3.6 27Bmedium Gemini 3.1 Flash LitenonevsQwen3.6 27Bmedium GPT-5 NanomediumvsGLM 5none Seed-2.0-LitenonevsGPT-5 Nanomedium GPT-5 NanomediumvsGLM 5V Turbonone