Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

OpenAI: GPT-5.4 Mini vs Qwen: Qwen3.5-27B

Ringkasan

Perbandingan benchmark GPT-5.4 Mini vs Qwen3.5-27B: Qwen3.5-27B unggul dalam skor rata-rata dengan 5.9 vs 5.3. Qwen3.5-27B memiliki biaya benchmark lebih rendah di $0.015 vs $0.038. GPT-5.4 Mini lebih cepat di 1.13s vs 1.68s, dengan tingkat keberhasilan 30.2% vs 38.1%.

Model yang direkomendasikan: Qwen3.5-27B - It has the best score here (5.9), while costing about 2.6x less than GPT-5.4 Mini.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-12

Metrik GPT-5.4 Mini GPT-5.4 Mini none Rilis: 2026-03-17 Qwen3.5-27B Qwen3.5-27B none Rilis: 2026-02-24
Skor 5.3 5.9
Peringkat #131 #109
Keandalan 10.0 10.0
Konsistensi 8.8 9.3
Tes benar
Tingkat lulus per percobaan 30.2% 38.1%
Tes tidak stabil 3 2
Total Run 63 63
Biaya per hasil 0.743 0.249
Total Biaya $0.038 $0.015
Harga input $0.750 / 1M $0.195 / 1M
Harga output $4.500 / 1M $1.560 / 1M
Total token input 34,244 44,478
Token output 2,541 3,592
Token penalaran 0 0
Waktu respons (rata-rata) 1.13s 1.68s
Waktu respons (maks) 2.52s 9.39s
Waktu respons (total) 23.82s 35.25s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#131 GPT-5.4 Mini

none
Cost
$0.010
Time
11.7s
Tokens
2,151 tok

#109 Qwen3.5-27B

none
Cost
$0.007
Time
42.9s
Tokens
4,273 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Mini 3.1 8.1 8.3% 1 929ms 606 654 0
Qwen3.5-27B 4.8 10.0 25.0% 0 788ms 696 267 0
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Mini 5.5 10.0 33.3% 0 913ms 7,305 401 0
Qwen3.5-27B 5.8 10.0 33.3% 0 1.80s 7,913 415 0
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Mini 3.0 10.0 0.0% 0 2.52s 11,019 298 0
Qwen3.5-27B 2.8 1.6 33.3% 1 9.39s 16,918 1,461 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Mini 10.0 10.0 100.0% 0 1.30s 7,140 222 0
Qwen3.5-27B 10.0 10.0 100.0% 0 1.43s 7,794 243 0
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Mini 3.5 4.4 33.3% 2 937ms 723 88 0
Qwen3.5-27B 3.0 10.0 0.0% 0 540ms 789 15 0
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Mini 4.8 10.0 0.0% 0 1.82s 477 174 0
Qwen3.5-27B 5.0 10.0 0.0% 0 2.51s 522 126 0
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Mini 6.3 10.0 50.0% 0 728ms 660 101 0
Qwen3.5-27B 6.3 10.0 50.0% 0 1.03s 711 69 0
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Mini 5.4 10.0 33.3% 0 836ms 642 305 0
Qwen3.5-27B 6.7 7.9 55.6% 1 1.38s 714 683 0
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Mini 3.0 10.0 0.0% 0 2.32s 5,477 255 0
Qwen3.5-27B 10.0 10.0 100.0% 0 3.54s 8,211 303 0
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
GPT-5.4 Mini 3.0 10.0 0.0% 0 1.33s 195 43 0
Qwen3.5-27B 3.0 10.0 0.0% 0 599ms 210 10 0

Perbandingan Cepat

Ganti Pasangan Perbandingan

MiniMax M2.7mediumvsGPT-5.4 MininoneMistral Small 4mediumvsGPT-5.4 MininoneGemini 3.1 Flash LiteminimalvsQwen3.5-27BnoneCobuddymediumvsGPT-5.4 MininoneDeepSeek V4 ProhighvsQwen3.5-27BnoneGemma 4 31BmediumTersedia gratisvsQwen3.5-27BnoneNemotron 3 SupermediumTersedia gratisvsQwen3.5-27BnoneGemini 3.1 Flash LitelowvsQwen3.5-27BnoneMiniMax M2.5mediumvsGPT-5.4 MininoneGemini 3.1 Flash Lite PreviewlowvsQwen3.5-27BnoneGPT-5.4 MininonevsQwen3 Coder NextmediumMiniMax M2.7mediumvsQwen3.5-27Bnone