Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.5 Flash vs Mistral: Mistral Small 4

Ringkasan

Perbandingan benchmark Gemini 3.5 Flash vs Mistral Small 4: Gemini 3.5 Flash unggul dalam skor rata-rata dengan 9.8 vs 5.1. Mistral Small 4 memiliki biaya benchmark lebih rendah di $0.007 vs $1.115. Mistral Small 4 lebih cepat di 630ms vs 8.84s, dengan tingkat keberhasilan 96.8% vs 27.0%.

Model yang direkomendasikan: Mistral Small 4 - It offers the best overall trade-off: a competitive score (5.1), lower cost than Gemini 3.5 Flash, and balanced response time.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-12

Metrik Gemini 3.5 Flash Gemini 3.5 Flash high Rilis: 2026-05-19 Mistral Small 4 Mistral Small 4 none Rilis: 2026-03-16
Skor 9.8 5.1
Peringkat #1 #136
Keandalan 10.0 10.0
Konsistensi 9.6 9.5
Tes benar
Tingkat lulus per percobaan 96.8% 27.0%
Tes tidak stabil 1 1
Total Run 63 63
Biaya per hasil 5.575 0.139
Total Biaya $1.115 $0.007
Harga input $1.500 / 1M $0.150 / 1M
Harga output $9.000 / 1M $0.600 / 1M
Total token input 37,594 37,309
Token output 1,975 2,201
Token penalaran 115,638 0
Waktu respons (rata-rata) 8.84s 630ms
Waktu respons (maks) 34.82s 1.72s
Waktu respons (total) 185.57s 13.22s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#1 Gemini 3.5 Flash

high
Cost
$0.208
Time
118.2s
Tokens
23,158 tok

#136 Mistral Small 4

none
Cost
$0.002
Time
10.4s
Tokens
2,370 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.57s 492 174 4,997
Mistral Small 4 3.4 7.9 16.7% 1 395ms 708 182 0
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 22.96s 8,118 456 47,129
Mistral Small 4 3.7 9.7 0.0% 0 901ms 7,636 619 0
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 22.37s 12,873 351 16,323
Mistral Small 4 3.0 10.0 0.0% 0 1.72s 11,640 496 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 6.43s 7,548 279 8,466
Mistral Small 4 10.0 10.0 100.0% 0 822ms 7,914 261 0
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 7.6 7.2 77.8% 1 14.09s 633 12 24,721
Mistral Small 4 5.3 10.0 33.3% 0 367ms 798 28 0
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.63s 486 115 1,650
Mistral Small 4 4.0 10.0 0.0% 0 729ms 519 205 0
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.35s 615 70 3,799
Mistral Small 4 6.5 10.0 50.0% 0 380ms 729 69 0
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.23s 558 241 4,940
Mistral Small 4 3.1 9.9 0.0% 0 399ms 735 111 0
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 9.8 10.0 100.0% 0 4.96s 6,115 265 1,608
Mistral Small 4 10.0 10.0 100.0% 0 1.40s 6,420 213 0
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.94s 156 12 2,005
Mistral Small 4 3.0 10.0 0.0% 0 397ms 210 17 0

Perbandingan Cepat

Ganti Pasangan Perbandingan

MiniMax M2.7mediumvsMistral Small 4noneCobuddymediumvsMistral Small 4noneMiniMax M2.5mediumvsMistral Small 4noneMistral Small 4nonevsQwen3 Coder NextmediumGemini 3.5 FlashhighvsQwen3.7 MaxmediumGemini 3.5 FlashhighvsGPT-5.5lowClaude Fable 5mediumvsGemini 3.5 FlashhighGemini 3.5 FlashhighvsGPT-5.5mediumMistral Small 4nonevsGLM 4.7 FlashmediumGemini 3.5 FlashhighvsGPT-5.3-CodexmediumGemini 3.5 FlashhighvsQwen3.6 Max PreviewmediumGemini 3.1 Flash LiteminimalvsMistral Small 4none