Navigasi
Advertise here

Mercury 2.5 (low) vs Nemotron 3.5 Lightning (high)

Nemotron 3.5 Lightning (high) unggul dalam skor rata-rata dengan 5.2 vs 5.1. Mercury 2.5 (low) memiliki biaya benchmark lebih rendah di $0.020 vs $0.168. Mercury 2.5 (low) lebih cepat di 3.34s vs 77.08s, dengan tingkat keberhasilan 37.7% vs 47.8%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-11-13

Model yang Dibandingkan

Peringkat
#391
Total token output
40,302
Waktu respons (rata-rata)
3.34s
Total Biaya
$0.020
Peringkat
#385
Total token output
626,081
Waktu respons (rata-rata)
77.08s
Total Biaya
$0.168
Model yang direkomendasikan Mercury 2.5 (low)

Its score stays close to the best score here (5.1 vs 5.2), while costing about 8.8x less than Nemotron 3.5 Lightning (high).

Perbandingan terperinci

Metrik Mercury 2.5 Mercury 2.5 low Rilis: 2026-09-08 Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Rilis: 2026-08-11 Tersedia gratis
Skor 5.1 5.2
Peringkat #391 #385
Keandalan 9.8 9.6
Konsistensi 8.2 5.7
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 37.7% 47.8%
Tes tidak stabil 5 12
Total Run 69 69
Biaya per hasil 0.319 0.000
Total Biaya $0.020 $0.168
Harga input $0.040 / 1M $0.060 / 1M
Harga output $0.150 / 1M $0.160 / 1M
Harga baca cache $0.004 / 1M $0.030 / 1M
Harga tulis cache T/A T/A
Total token input 326,083 170,517
Token output 7,224 149,968
Token penalaran 33,078 509,725
Waktu respons (rata-rata) 3.34s 77.08s
Waktu respons (maks) 47.06s 490.99s
Waktu respons (total) 76.80s 1772.78s
Parameter ~100B 30B total (3B aktif)
Ketersediaan Tertutup Bobot tersedia

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#391 Mercury 2.5

low
Biaya
$0.001
Waktu
2.4s
Token
1,236 tok

#385 Nemotron 3.5 Lightning

high
Biaya
$0.000
Waktu
92.8s
Token
11,343 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 5.5 10.0 33.3% 0 972ms 7,909 521 2,269
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 168.41s 7,623 68,533 242,319

Ganti Pasangan Perbandingan