Navigasi
AI BENCHY
Your ad here

AI BENCHY Compare

Google: Gemini 3.1 Pro Preview vs Mistral: Mistral Small 4

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-03-17

Metrik Gemini 3.1 Pro Preview Gemini 3.1 Pro Preview medium Rilis: 2026-02-19 Mistral Small 4 Mistral Small 4 none Rilis: 2026-03-16
Peringkat #2 #61
Skor 9.6 5.3
Konsistensi 10.0 9.5
Biaya per hasil 3.257 0.108
Total Biaya $0.522 $0.006
Tes benar
Tingkat lulus per percobaan 94.1% 33.3%
Tes tidak stabil 0 1
Total Run 51 51
Token output 1,527 1,624
Token penalaran 36,341 0
Waktu respons (rata-rata) 15.56s 629ms
Waktu respons (maks) 40.61s 1.72s
Waktu respons (total) 155.64s 10.70s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 7.90s 112 3,218
Mistral Small 4 3.4 7.9 16.7% 1 395ms 182 0
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Pro Preview 9.5 10.0 100.0% 0 40.61s 432 9,281
Mistral Small 4 3.0 10.0 0.0% 0 1.72s 496 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 7.72s 279 3,904
Mistral Small 4 10.0 10.0 100.0% 0 822ms 261 0
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Pro Preview 7.7 10.0 66.7% 0 32.73s 18 12,424
Mistral Small 4 5.3 10.0 33.3% 0 367ms 28 0
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 11.77s 108 1,179
Mistral Small 4 4.0 10.0 0.0% 0 729ms 205 0
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 9.56s 72 2,236
Mistral Small 4 6.5 10.0 50.0% 0 380ms 69 0
Puzzle Solving Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 7.15s 232 3,117
Mistral Small 4 3.1 9.9 0.0% 0 589ms 170 0
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 23.15s 274 982
Mistral Small 4 10.0 10.0 100.0% 0 1.40s 213 0

Perbandingan Cepat

Ganti Pasangan Perbandingan

Mistral Small 4nonevsQwen3 Coder NextmediumMistral Small 4nonevsGLM 4.7 FlashmediumMiniMax M2.5mediumTersedia gratisvsMistral Small 4noneMistral Small 4nonevsgpt-oss-120bmediumTersedia gratisMistral Small 4nonevsQwen3.5-9BmediumMistral Small 4nonevsGrok 4.20 Multi-Agent BetamediumMistral Small 4nonevsGPT-5 NanomediumMercury 2mediumvsMistral Small 4noneMistral Small 4nonevsGPT-5 MinimediumMistral Small 4nonevsNemotron 3 Super 120b A12bmediumTersedia gratisMistral Small 4nonevsGrok 4.1 FastmediumMistral Small 4nonevsHunter Alphamedium