Navigasi
AI BENCHY
Your ad here

AI BENCHY Compare

Google: Gemma 4 26B A4B vs Mistral: Mistral Small 4

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-04-04

Metrik Gemma 4 26B A4B Gemma 4 26B A4B none Rilis: 2026-04-03 Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16
Skor 6.3 5.6
Peringkat #53 #68
Konsistensi 9.1 7.0
Tes benar
Tingkat lulus per percobaan 47.1% 49.0%
Tes tidak stabil 2 6
Total Run 51 51
Biaya per hasil 0.068 0.502
Total Biaya $0.005 $0.026
Harga input $0.130 / 1M $0.150 / 1M
Harga output $0.400 / 1M $0.600 / 1M
Token output 1,335 12,288
Token penalaran 0 28,112
Waktu respons (rata-rata) 6.56s 4.18s
Waktu respons (maks) 57.10s 25.25s
Waktu respons (total) 111.54s 71.03s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemma 4 26B A4B 8.3 10.0 75.0% 0 1.28s 230 0
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemma 4 26B A4B 3.0 10.0 0.0% 0 30.53s 309 0
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemma 4 26B A4B 10.0 10.0 100.0% 0 1.70s 285 0
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemma 4 26B A4B 3.6 7.2 22.2% 1 2.49s 27 0
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemma 4 26B A4B 4.0 10.0 0.0% 0 3.54s 85 0
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemma 4 26B A4B 4.4 6.9 16.7% 1 1.08s 75 0
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Puzzle Solving Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemma 4 26B A4B 5.7 10.0 33.3% 0 739ms 114 0
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemma 4 26B A4B 10.0 10.0 100.0% 0 57.10s 210 0
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810

Perbandingan Cepat

Ganti Pasangan Perbandingan

Gemma 4 26B A4BnonevsGPT-5 NanomediumMistral Small 4mediumvsGLM 5 TurbononeMistral Small 4mediumvsGLM 4.7 FlashnoneGemma 4 26B A4BnonevsGrok 4.20 Multi Agent BetamediumMistral Small 4mediumvsQwen3.5-27BnoneGemma 4 26B A4BnonevsMercury 2mediumMistral Small 4mediumvsGPT-5.4noneMistral Small 4mediumvsMiMo-V2-PrononeMistral Small 4mediumvsQwen3.5-122B-A10BnoneMistral Small 4mediumvsGrok 4.20noneMistral Small 4mediumvsGrok 4.20 BetanoneMistral Small 4mediumvsKimi K2.5none