Navigasi
Advertise here

Mercury 2.5 vs Nemotron 3.5 Lightning

Skor rata-rata hampir imbang di 3.9 vs 4.0. Nemotron 3.5 Lightning memiliki biaya benchmark lebih rendah di $0.007 vs $0.016. Nemotron 3.5 Lightning lebih cepat di 1.21s vs 2.45s, dengan tingkat keberhasilan 25.8% vs 16.7%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-08

Model yang Dibandingkan

Peringkat
#312
Total token output
71,143
Waktu respons (rata-rata)
2.45s
Total Biaya
$0.016
Peringkat
#310
Total token output
2,731
Waktu respons (rata-rata)
1.21s
Total Biaya
$0.007
Model yang direkomendasikan Nemotron 3.5 Lightning

It has the best score here (4.0), while costing about 2.4x less than Mercury 2.5.

Perbandingan terperinci

Metrik Mercury 2.5 Mercury 2.5 none Rilis: 2026-09-08 Nemotron 3.5 Lightning Nemotron 3.5 Lightning none Rilis: 2026-08-11 Tersedia gratis
Skor 3.9 4.0
Peringkat #312 #310
Keandalan 10.0 10.0
Konsistensi 7.5 9.2
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 25.8% 16.7%
Tes tidak stabil 7 2
Total Run 66 66
Biaya per hasil 0.782 0.000
Total Biaya $0.016 $0.007
Harga input $0.040 / 1M $0.080 / 1M
Harga output $0.150 / 1M $0.200 / 1M
Total token input 123,740 74,074
Token output 71,143 2,731
Token penalaran 0 0
Waktu respons (rata-rata) 2.45s 1.21s
Waktu respons (maks) 36.48s 6.30s
Waktu respons (total) 53.83s 26.62s
Parameter ~100B 30B total (3B aktif)
Ketersediaan Tertutup Bobot tersedia

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#312 Mercury 2.5

none
Biaya
$0.001
Waktu
2.7s
Token
2,749 tok

#310 Nemotron 3.5 Lightning

none
Biaya
$0.000
Waktu
101.6s
Token
6,775 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 3.7 7.0 22.2% 1 12.50s 7,888 61,297 0
Nemotron 3.5 Lightning 3.1 7.2 11.1% 1 1.55s 7,623 589 0

Perbandingan Cepat

Ganti Pasangan Perbandingan