Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.1 Flash Lite vs Mistral: Mistral Small 4

Ringkasan

Perbandingan benchmark Gemini 3.1 Flash Lite vs Mistral Small 4: Gemini 3.1 Flash Lite unggul dalam skor rata-rata dengan 6.4 vs 5.1. Mistral Small 4 memiliki biaya benchmark lebih rendah di $0.007 vs $0.028. Mistral Small 4 lebih cepat di 630ms vs 1.89s, dengan tingkat keberhasilan 61.9% vs 27.0%.

Model yang direkomendasikan: Gemini 3.1 Flash Lite - It has the strongest score in this comparison (6.4) and the best overall balance of cost and response time across all 2 models.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-12

Metrik Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite low Rilis: 2026-05-08 Mistral Small 4 Mistral Small 4 none Rilis: 2026-03-16
Skor 6.4 5.1
Peringkat #85 #136
Keandalan 10.0 10.0
Konsistensi 9.3 9.5
Tes benar
Tingkat lulus per percobaan 61.9% 27.0%
Tes tidak stabil 2 1
Total Run 63 63
Biaya per hasil 0.227 0.139
Total Biaya $0.028 $0.007
Harga input $0.250 / 1M $0.150 / 1M
Harga output $1.500 / 1M $0.600 / 1M
Total token input 36,892 37,309
Token output 2,732 2,201
Token penalaran 9,260 0
Waktu respons (rata-rata) 1.89s 630ms
Waktu respons (maks) 5.66s 1.72s
Waktu respons (total) 39.62s 13.22s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#85 Gemini 3.1 Flash Lite

low
Cost
$0.003
Time
4.0s
Tokens
1,479 tok

#136 Mistral Small 4

none
Cost
$0.002
Time
10.4s
Tokens
2,370 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.1 Flash Lite 7.3 6.2 75.0% 2 1.84s 500 1,013 1,548
Mistral Small 4 3.4 7.9 16.7% 1 395ms 708 182 0
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.1 Flash Lite 5.5 10.0 33.3% 0 1.53s 8,132 471 1,072
Mistral Small 4 3.7 9.7 0.0% 0 901ms 7,636 619 0
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.1 Flash Lite 3.0 10.0 0.0% 0 4.48s 12,870 348 975
Mistral Small 4 3.0 10.0 0.0% 0 1.72s 11,640 496 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.1 Flash Lite 10.0 10.0 100.0% 0 1.44s 7,453 291 697
Mistral Small 4 10.0 10.0 100.0% 0 822ms 7,914 261 0
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.1 Flash Lite 5.3 10.0 33.3% 0 1.52s 639 15 1,214
Mistral Small 4 5.3 10.0 33.3% 0 367ms 798 28 0
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.1 Flash Lite 4.0 10.0 0.0% 0 1.37s 492 69 438
Mistral Small 4 4.0 10.0 0.0% 0 729ms 519 205 0
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.1 Flash Lite 10.0 10.0 100.0% 0 1.52s 619 72 760
Mistral Small 4 6.5 10.0 50.0% 0 380ms 729 69 0
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.1 Flash Lite 10.0 10.0 100.0% 0 1.40s 570 210 1,191
Mistral Small 4 3.1 9.9 0.0% 0 399ms 735 111 0
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.1 Flash Lite 10.0 10.0 100.0% 0 5.66s 5,457 234 945
Mistral Small 4 10.0 10.0 100.0% 0 1.40s 6,420 213 0
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.1 Flash Lite 3.0 10.0 0.0% 0 1.46s 160 9 420
Mistral Small 4 3.0 10.0 0.0% 0 397ms 210 17 0

Perbandingan Cepat

Ganti Pasangan Perbandingan

MiniMax M2.7mediumvsMistral Small 4noneGemini 3.1 Flash LitelowvsNemotron 3 SupermediumTersedia gratisGemini 3.1 Flash LitelowvsQwen3.5-35B-A3BmediumGemini 3.1 Flash LitelowvsQwen3.6 27BmediumGemini 3.1 Flash LitelowvsGPT-5.5noneCobuddymediumvsMistral Small 4noneGemini 3.1 Flash LitelowvsGPT-5 NanomediumSeed-2.0-LitenonevsGemini 3.1 Flash LitelowGemini 3.1 Flash Litelowvsgpt-oss-120bmediumTersedia gratisGemini 3.1 Flash LitelowvsMiMo-V2.5mediumGemini 3.1 Flash LitelowvsQwen3.6 35B A3BmediumGemini 3.1 Flash LitelowvsQwen3.5-Flashnone