Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

DeepSeek: DeepSeek V4 Pro vs Mistral: Mistral Small 4

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-05-22

Metrik DeepSeek V4 Pro DeepSeek V4 Pro none Rilis: 2026-04-24 Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16
Skor 6.0 5.4
Peringkat #95 #121
Keandalan 8.1 10.0
Konsistensi 8.9 7.1
Tes benar
Tingkat lulus per percobaan 48.3% 45.0%
Tes tidak stabil 3 7
Total Run 60 60
Biaya per hasil 0.564 1.109
Total Biaya $0.046 $0.056
Harga input $0.435 / 1M $0.150 / 1M
Harga output $0.870 / 1M $0.600 / 1M
Token output 5,347 21,628
Token penalaran 0 68,055
Waktu respons (rata-rata) 13.48s 8.33s
Waktu respons (maks) 58.65s 59.15s
Waktu respons (total) 269.56s 166.59s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
DeepSeek V4 Pro 3.5 8.0 16.7% 1 14.02s 704 0
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
DeepSeek V4 Pro 5.4 6.8 33.3% 1 8.27s 527 0
Mistral Small 4 5.1 6.8 33.3% 1 44.82s 9,322 38,386
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
DeepSeek V4 Pro 9.5 10.0 100.0% 0 25.49s 1,911 0
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
DeepSeek V4 Pro 8.8 10.0 100.0% 0 30.54s 170 0
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
DeepSeek V4 Pro 5.3 10.0 33.3% 0 3.17s 18 0
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
DeepSeek V4 Pro 4.3 9.9 0.0% 0 3.75s 132 0
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
DeepSeek V4 Pro 6.3 10.0 50.0% 0 8.23s 64 0
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
DeepSeek V4 Pro 7.6 7.2 77.8% 1 19.72s 175 0
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
DeepSeek V4 Pro 10.0 10.0 100.0% 0 5.92s 219 0
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
DeepSeek V4 Pro 3.0 10.0 0.0% 0 15.59s 1,427 0
Mistral Small 4 3.0 10.0 0.0% 0 5.92s 18 1,557

Perbandingan Cepat

Ganti Pasangan Perbandingan