Navigasi
Advertise here

Granite 4.1 8b (default) vs Mercury 2.5

Mercury 2.5 unggul dalam skor rata-rata dengan 4.1 vs 3.8. Granite 4.1 8b (default) memiliki biaya benchmark lebih rendah di $0.007 vs $0.026. Granite 4.1 8b (default) lebih cepat di 1.38s vs 5.10s, dengan tingkat keberhasilan 8.7% vs 24.6%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-10-19

Model yang Dibandingkan

Peringkat
#405
Total token output
5,996
Waktu respons (rata-rata)
1.38s
Total Biaya
$0.007
Peringkat
#397
Total token output
89,958
Waktu respons (rata-rata)
5.10s
Total Biaya
$0.026
Model yang direkomendasikan Granite 4.1 8b (default)

Its score stays close to the best score here (3.8 vs 4.1), while costing about 4.1x less than Mercury 2.5.

Perbandingan terperinci

Metrik Granite 4.1 8b Granite 4.1 8b default Rilis: 2026-05-01 Mercury 2.5 Mercury 2.5 none Rilis: 2026-09-08
Skor 3.8 4.1
Peringkat #405 #397
Keandalan 10.0 10.0
Konsistensi 10.0 7.6
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 8.7% 24.6%
Tes tidak stabil 0 7
Total Run 69 69
Biaya per hasil 0.315 1.298
Total Biaya $0.007 $0.026
Harga input $0.050 / 1M $0.040 / 1M
Harga output $0.100 / 1M $0.150 / 1M
Harga baca cache T/A $0.004 / 1M
Harga tulis cache T/A T/A
Total token input 113,836 311,488
Token output 5,996 89,958
Token penalaran 0 0
Waktu respons (rata-rata) 1.38s 5.10s
Waktu respons (maks) 16.67s 63.41s
Waktu respons (total) 31.81s 117.24s
Parameter 8B ~100B
Ketersediaan Sumber terbuka Tertutup

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#405 Granite 4.1 8b

default
Biaya
$0.001
Waktu
3.2s
Token
491 tok

#397 Mercury 2.5

none
Biaya
$0.001
Waktu
2.7s
Token
2,749 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Granite 4.1 8b 4.5 10.0 0.0% 0 775ms 8,344 525 0
Mercury 2.5 3.7 7.0 22.2% 1 12.50s 7,888 61,297 0

Ganti Pasangan Perbandingan