Navigasi
AI BENCHY
Your ad here

AI BENCHY Compare

OpenAI: GPT-5.4 Mini vs xAI: Grok 4.1 Fast

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-03-17

Metrik GPT-5.4 Mini GPT-5.4 Mini medium Rilis: 2026-03-17 Grok 4.1 Fast Grok 4.1 Fast medium Rilis: 2025-11-19
Peringkat #34 #36
Skor 7.1 6.9
Konsistensi 7.2 7.5
Biaya per hasil 3.610 0.568
Total Biaya $0.289 $0.052
Tes benar
Tingkat lulus per percobaan 68.6% 66.7%
Tes tidak stabil 6 5
Total Run 51 51
Token output 1,708 1,189
Token penalaran 58,019 84,595
Waktu respons (rata-rata) 15.66s 23.91s
Waktu respons (maks) 102.91s 121.79s
Waktu respons (total) 266.14s 239.09s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 8.6 7.9 91.7% 1 4.05s 296 2,876
Grok 4.1 Fast 8.7 7.9 91.7% 1 3.81s 108 4,741
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 10.0 10.0 100.0% 0 17.81s 317 4,317
Grok 4.1 Fast 10.0 10.0 100.0% 0 37.64s 261 12,272
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 10.0 10.0 100.0% 0 2.43s 234 650
Grok 4.1 Fast 10.0 10.0 100.0% 0 6.63s 180 5,409
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 4.1 4.4 44.5% 2 65.31s 60 43,286
Grok 4.1 Fast 5.8 4.4 66.7% 2 121.79s 11 37,657
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 4.5 10.0 0.0% 0 3.72s 150 510
Grok 4.1 Fast 4.2 9.9 0.0% 0 16.25s 127 3,456
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 7.4 6.5 66.7% 1 2.50s 129 1,337
Grok 4.1 Fast 6.6 10.0 50.0% 0 5.30s 55 3,489
Puzzle Solving Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 6.8 7.9 55.6% 1 4.33s 271 2,449
Grok 4.1 Fast 5.3 7.2 44.4% 1 8.08s 187 6,086
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
GPT-5.4 Mini 4.7 1.6 66.7% 1 9.62s 251 2,594
Grok 4.1 Fast 2.8 1.6 33.3% 1 27.71s 260 11,485

Perbandingan Cepat

Ganti Pasangan Perbandingan

Claude Sonnet 4.6nonevsGPT-5.4 MinimediumQwen3.5 Plus 2026-02-15nonevsGrok 4.1 FastmediumGrok 4.1 FastmediumvsGLM 5noneClaude Sonnet 4.6nonevsGrok 4.1 FastmediumGPT-5.4 MinimediumvsQwen3.5 Plus 2026-02-15noneGPT-5.4 MinimediumvsGLM 5noneDeepSeek V3.2nonevsGrok 4.1 FastmediumGPT-5.3 ChatnonevsGrok 4.1 FastmediumGemini 3.1 Flash Lite PreviewnonevsGPT-5.4 MinimediumDeepSeek V3.2nonevsGPT-5.4 MinimediumGPT-5.2 ChatnonevsGrok 4.1 FastmediumGemini 3.1 Flash Lite PreviewnonevsGrok 4.1 Fastmedium