Navigasi
Advertise here

Mercury 2 vs Nemotron 3.5 Lightning (low)

Nemotron 3.5 Lightning (low) unggul dalam skor rata-rata dengan 4.6 vs 4.4. Mercury 2 memiliki biaya benchmark lebih rendah di $0.033 vs $0.117. Mercury 2 lebih cepat di 1.18s vs 83.19s, dengan tingkat keberhasilan 23.2% vs 40.6%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-10-01

Model yang Dibandingkan

Peringkat
#338
Total token output
9,709
Waktu respons (rata-rata)
1.18s
Total Biaya
$0.033
Peringkat
#325
Total token output
670,615
Waktu respons (rata-rata)
83.19s
Total Biaya
$0.117
Model yang direkomendasikan Mercury 2

Its score stays close to the best score here (4.4 vs 4.6), while costing about 3.6x less than Nemotron 3.5 Lightning (low).

Perbandingan terperinci

Metrik Mercury 2 Mercury 2 none Rilis: 2026-02-24 Nemotron 3.5 Lightning Nemotron 3.5 Lightning low Rilis: 2026-08-11 Tersedia gratis
Skor 4.4 4.6
Peringkat #338 #325
Keandalan 10.0 9.5
Konsistensi 9.2 6.8
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 23.2% 40.6%
Tes tidak stabil 2 9
Total Run 69 69
Biaya per hasil 0.812 0.000
Total Biaya $0.033 $0.117
Harga input $0.250 / 1M $0.060 / 1M
Harga output $0.750 / 1M $0.160 / 1M
Total token input 100,634 207,883
Token output 9,709 144,718
Token penalaran 0 525,897
Waktu respons (rata-rata) 1.18s 83.19s
Waktu respons (maks) 9.00s 597.61s
Waktu respons (total) 27.14s 1913.41s
Parameter ~100B 30B total (3B aktif)
Ketersediaan Tertutup Bobot tersedia

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#338 Mercury 2

none
Biaya
$0.002
Waktu
1.8s
Token
1,514 tok

#325 Nemotron 3.5 Lightning

low
Biaya
$0.000
Waktu
32.2s
Token
6,089 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
Nemotron 3.5 Lightning 4.0 7.8 11.1% 1 224.42s 7,522 72,614 262,558

Perbandingan Cepat

Ganti Pasangan Perbandingan