Navigasi
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Mistral Small 4 (medium) vs Nemotron 3.5 Lightning (medium)

Skor rata-rata hampir imbang di 5.1 vs 5.2. Mistral Small 4 (medium) memiliki biaya benchmark lebih rendah di $0.096 vs $0.193. Mistral Small 4 (medium) lebih cepat di 10.77s vs 69.64s, dengan tingkat keberhasilan 42.4% vs 47.0%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-08-11

Peringkat
#211
Total token output
131,824
Waktu respons (rata-rata)
10.77s
Total Biaya
$0.096
Peringkat
#208
Total token output
741,084
Waktu respons (rata-rata)
69.64s
Total Biaya
$0.193
Model yang direkomendasikan Mistral Small 4 (medium)

It has the best score here (5.1), while costing about 2.0x less than Nemotron 3.5 Lightning (medium).

Perbandingan terperinci

Metrik Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16 Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium Rilis: 2026-08-11 Tersedia gratis
Skor 5.1 5.2
Peringkat #211 #208
Keandalan 10.0 9.9
Konsistensi 7.0 6.4
Cakupan benchmark 22/22 tes · 66/66 percobaan 22/22 tes · 66/66 percobaan
Tes benar
Tingkat lulus per percobaan 42.4% 47.0%
Tes tidak stabil 8 10
Total Run 66 66
Biaya per hasil 1.913 0.000
Total Biaya $0.096 $0.193
Harga input $0.150 / 1M $0.100 / 1M
Harga output $0.600 / 1M $0.250 / 1M
Total token input 140,494 126,321
Token output 39,462 156,554
Token penalaran 92,362 584,530
Waktu respons (rata-rata) 10.77s 69.64s
Waktu respons (maks) 59.15s 437.11s
Waktu respons (total) 236.94s 1532.18s

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#211 Mistral Small 4

medium
Biaya
$0.006
Waktu
47.9s
Token
9,857 tok

#208 Nemotron 3.5 Lightning

medium
Belum ada hasil showcase yang dihasilkan untuk model ini.
Biaya
$0.000
Waktu
-
Token
0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 285.47s 7,623 78,065 297,359

Perbandingan Cepat

Ganti Pasangan Perbandingan