Navigasi
AI BENCHY
Your ad here

AI BENCHY Compare

OpenAI: GPT-5.4 Mini vs xAI: Grok 4.1 Fast

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-03-17

Metrik GPT-5.4 Mini GPT-5.4 Mini none Rilis: 2026-03-17 Grok 4.1 Fast Grok 4.1 Fast medium Rilis: 2025-11-19
Peringkat #66 #36
Skor 4.8 6.9
Konsistensi 8.6 7.5
Biaya per hasil 0.737 0.568
Total Biaya $0.030 $0.052
Tes benar
Tingkat lulus per percobaan 31.4% 66.7%
Tes tidak stabil 3 5
Total Run 51 51
Token output 2,085 1,189
Token penalaran 0 84,595
Waktu respons (rata-rata) 1.17s 23.91s
Waktu respons (maks) 2.52s 121.79s
Waktu respons (total) 19.82s 239.09s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 3.1 8.1 8.3% 1 929ms 654 0
Grok 4.1 Fast 8.7 7.9 91.7% 1 3.81s 108 4,741
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 3.0 10.0 0.0% 0 2.52s 298 0
Grok 4.1 Fast 10.0 10.0 100.0% 0 37.64s 261 12,272
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 10.0 10.0 100.0% 0 1.30s 222 0
Grok 4.1 Fast 10.0 10.0 100.0% 0 6.63s 180 5,409
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 3.5 4.4 33.3% 2 937ms 88 0
Grok 4.1 Fast 5.8 4.4 66.7% 2 121.79s 11 37,657
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 4.8 10.0 0.0% 0 1.82s 174 0
Grok 4.1 Fast 4.2 9.9 0.0% 0 16.25s 127 3,456
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 6.3 10.0 50.0% 0 728ms 101 0
Grok 4.1 Fast 6.6 10.0 50.0% 0 5.30s 55 3,489
Puzzle Solving Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 5.4 10.0 33.3% 0 860ms 293 0
Grok 4.1 Fast 5.3 7.2 44.4% 1 8.08s 187 6,086
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 3.0 10.0 0.0% 0 2.32s 255 0
Grok 4.1 Fast 2.8 1.6 33.3% 1 27.71s 260 11,485

Perbandingan Cepat

Ganti Pasangan Perbandingan

GPT-5.4 MininonevsQwen3 Coder NextmediumGPT-5.4 MininonevsGLM 4.7 FlashmediumQwen3.5 Plus 2026-02-15nonevsGrok 4.1 FastmediumGrok 4.1 FastmediumvsGLM 5noneClaude Sonnet 4.6nonevsGrok 4.1 FastmediumGPT-5.4 MininonevsQwen3.5-9BmediumDeepSeek V3.2nonevsGrok 4.1 FastmediumGPT-5.3 ChatnonevsGrok 4.1 FastmediumMistral Small 4mediumvsGPT-5.4 MininoneGPT-5.2 ChatnonevsGrok 4.1 FastmediumGemini 3.1 Flash Lite PreviewnonevsGrok 4.1 FastmediumQwen3.5-FlashnonevsGrok 4.1 Fastmedium