Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

OpenAI: GPT-5.4 Nano vs Qwen: Qwen3.6 27B

Ringkasan

Perbandingan benchmark GPT-5.4 Nano vs Qwen3.6 27B: Qwen3.6 27B unggul dalam skor rata-rata dengan 5.5 vs 4.8. GPT-5.4 Nano memiliki biaya benchmark lebih rendah di $0.011 vs $0.027. GPT-5.4 Nano lebih cepat di 1.48s vs 3.72s, dengan tingkat keberhasilan 30.2% vs 47.6%.

Model yang direkomendasikan: GPT-5.4 Nano - Its score stays close to the best score here (4.8 vs 5.5), while costing about 2.6x less than Qwen3.6 27B.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-12

Metrik GPT-5.4 Nano GPT-5.4 Nano none Rilis: 2026-03-17 Qwen3.6 27B Qwen3.6 27B none Rilis: 2026-04-20
Skor 4.8 5.5
Peringkat #149 #124
Keandalan 10.0 10.0
Konsistensi 8.2 7.6
Tes benar
Tingkat lulus per percobaan 30.2% 47.6%
Tes tidak stabil 5 6
Total Run 63 63
Biaya per hasil 0.259 0.467
Total Biaya $0.011 $0.027
Harga input $0.200 / 1M $0.288 / 1M
Harga output $1.250 / 1M $3.100 / 1M
Total token input 34,212 52,721
Token output 2,784 3,812
Token penalaran 0 0
Waktu respons (rata-rata) 1.48s 3.72s
Waktu respons (maks) 4.47s 11.82s
Waktu respons (total) 31.01s 78.08s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#149 GPT-5.4 Nano

none
Cost
$0.008
Time
46.1s
Tokens
5,735 tok

#124 Qwen3.6 27B

none
Cost
$0.009
Time
83.0s
Tokens
4,549 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Nano 3.5 8.0 16.7% 1 1.18s 606 800 0
Qwen3.6 27B 3.8 3.7 41.7% 3 2.83s 696 490 0
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Nano 4.6 7.9 22.2% 1 2.22s 7,305 613 0
Qwen3.6 27B 5.5 10.0 33.3% 0 4.16s 7,913 539 0
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Nano 3.0 10.0 0.0% 0 3.84s 11,019 280 0
Qwen3.6 27B 3.0 10.0 0.0% 0 9.95s 22,497 1,401 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Nano 6.5 10.0 50.0% 0 1.11s 7,140 219 0
Qwen3.6 27B 7.3 5.8 83.3% 1 2.06s 7,788 248 0
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Nano 2.9 4.4 22.2% 2 926ms 723 52 0
Qwen3.6 27B 7.7 10.0 66.7% 0 3.03s 789 24 0
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Nano 3.8 2.5 33.3% 1 1.31s 477 180 0
Qwen3.6 27B 5.2 9.9 0.0% 0 1.07s 522 72 0
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Nano 6.3 10.0 50.0% 0 784ms 660 89 0
Qwen3.6 27B 6.2 5.8 66.7% 1 1.92s 711 49 0
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Nano 5.4 10.0 33.3% 0 1.25s 642 308 0
Qwen3.6 27B 5.3 7.2 44.4% 1 5.15s 714 639 0
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Nano 10.0 10.0 100.0% 0 3.40s 5,445 222 0
Qwen3.6 27B 9.5 10.0 100.0% 0 6.74s 10,881 339 0
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Nano 3.0 10.0 0.0% 0 773ms 195 21 0
Qwen3.6 27B 3.0 10.0 0.0% 0 4.03s 210 11 0

Perbandingan Cepat

Ganti Pasangan Perbandingan

MiniMax M2.5mediumvsGPT-5.4 NanononeGPT-5.4 NanononevsQwen3 Coder NextmediumCobuddymediumvsGPT-5.4 NanononeMiniMax M2.7mediumvsQwen3.6 27BnoneMistral Small 4mediumvsGPT-5.4 NanononeMistral Small 4mediumvsQwen3.6 27BnoneMiniMax M2.7mediumvsGPT-5.4 NanononeGPT-5.4 NanononevsGLM 4.7 FlashmediumCobuddymediumvsQwen3.6 27BnoneGemini 3.1 Flash LiteminimalvsQwen3.6 27BnoneMiniMax M2.5mediumvsQwen3.6 27BnoneDeepSeek V4 ProhighvsQwen3.6 27Bnone