Navigasi
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Mercury 2.5 Preview (default) vs Nemotron 3.5 Lightning (medium)

Skor rata-rata hampir imbang di 4.7 vs 4.7. Mercury 2.5 Preview (default) memiliki biaya benchmark lebih rendah di $0.023 vs $0.195. Mercury 2.5 Preview (default) lebih cepat di 7.05s vs 81.93s, dengan tingkat keberhasilan 29.0% vs 47.8%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-11-16

Model yang Dibandingkan

Peringkat
#419
Total token output
86,367
Waktu respons (rata-rata)
7.05s
Total Biaya
$0.023
Peringkat
#420
Total token output
732,696
Waktu respons (rata-rata)
81.93s
Total Biaya
$0.195
Model yang direkomendasikan Mercury 2.5 Preview (default)

It has the best score here (4.7), while costing about 8.5x less than Nemotron 3.5 Lightning (medium).

Perbandingan terperinci

Metrik Mercury 2.5 Preview Mercury 2.5 Preview default Rilis: 2026-09-02 Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium Rilis: 2026-08-11 Tersedia gratis
Skor 4.7 4.7
Peringkat #419 #420
Keandalan 9.9 9.8
Konsistensi 8.3 5.8
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 29.0% 47.8%
Tes tidak stabil 5 12
Total Run 69 69
Biaya per hasil 0.559 0.000
Total Biaya $0.023 $0.195
Harga input $0.040 / 1M $0.060 / 1M
Harga output $0.150 / 1M $0.160 / 1M
Harga baca cache T/A $0.030 / 1M
Harga tulis cache T/A T/A
Total token input 250,541 195,780
Token output 86,367 167,746
Token penalaran 0 598,384
Waktu respons (rata-rata) 7.05s 81.93s
Waktu respons (maks) 84.96s 437.11s
Waktu respons (total) 162.25s 1884.31s
Parameter ~100B 30B total (3B aktif)
Ketersediaan Tertutup Bobot tersedia

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#419 Mercury 2.5 Preview

default
SVG tidak valid
Biaya
$0.001
Waktu
3.3s
Token
3,122 tok

#420 Nemotron 3.5 Lightning

medium
Biaya
$0.000
Waktu
130.5s
Token
6,750 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 Preview 4.7 7.9 22.2% 1 459ms 7,850 650 0
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 285.47s 7,623 78,065 297,359

Ganti Pasangan Perbandingan