Navigasi
Advertise here

Mercury 2.5 (low) vs Mistral Small 4

Skor rata-rata hampir imbang di 5.1 vs 5.1. Mercury 2.5 (low) memiliki biaya benchmark lebih rendah di $0.011 vs $0.022. Mistral Small 4 lebih cepat di 1.20s vs 1.35s, dengan tingkat keberhasilan 39.4% vs 25.8%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-08

Model yang Dibandingkan

Peringkat
#265
Total token output
33,719
Waktu respons (rata-rata)
1.35s
Total Biaya
$0.011
Peringkat
#261
Total token output
9,812
Waktu respons (rata-rata)
1.20s
Total Biaya
$0.022
Model yang direkomendasikan Mistral Small 4

It has the strongest score in this comparison (5.1) and the best overall balance of cost and response time across all 2 models.

Perbandingan terperinci

Metrik Mercury 2.5 Mercury 2.5 low Rilis: 2026-09-08 Mistral Small 4 Mistral Small 4 none Rilis: 2026-03-16
Skor 5.1 5.1
Peringkat #265 #261
Keandalan 9.8 10.0
Konsistensi 8.1 9.6
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 39.4% 25.8%
Tes tidak stabil 5 1
Total Run 66 66
Biaya per hasil 0.177 0.432
Total Biaya $0.011 $0.022
Harga input $0.040 / 1M $0.150 / 1M
Harga output $0.150 / 1M $0.600 / 1M
Total token input 138,020 104,717
Token output 6,083 9,812
Token penalaran 27,636 0
Waktu respons (rata-rata) 1.35s 1.20s
Waktu respons (maks) 7.48s 13.16s
Waktu respons (total) 29.74s 26.41s
Parameter ~100B 119B total (6B aktif)
Ketersediaan Tertutup Sumber terbuka

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#265 Mercury 2.5

low
Biaya
$0.001
Waktu
2.4s
Token
1,236 tok

#261 Mistral Small 4

none
Biaya
$0.002
Waktu
10.4s
Token
2,370 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 5.5 10.0 33.3% 0 972ms 7,909 521 2,269
Mistral Small 4 3.7 9.7 0.0% 0 901ms 7,636 619 0

Perbandingan Cepat

Ganti Pasangan Perbandingan