Navigasi
Advertise here

Nemotron 3.5 Lightning (high) vs Qwen3.8 27B

Skor rata-rata hampir imbang di 5.6 vs 5.5. Qwen3.8 27B memiliki biaya benchmark lebih rendah di ~$0.006 vs $0.134. Qwen3.8 27B lebih cepat di 3.12s vs 58.26s, dengan tingkat keberhasilan 50.0% vs 40.9%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-28

Model yang Dibandingkan

Peringkat
#273
Total token output
654,597
Waktu respons (rata-rata)
58.26s
Total Biaya
$0.134
Peringkat
#277
Total token output
11,445
Waktu respons (rata-rata)
3.12s
Total Biaya
~$0.006
Model yang direkomendasikan Qwen3.8 27B

It has the best score here (5.5), while costing about 23.6x less than Nemotron 3.5 Lightning (high).

Perbandingan terperinci

Metrik Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Rilis: 2026-08-11 Tersedia gratis Qwen3.8 27B Qwen3.8 27B none Rilis: 2026-08-14
Skor 5.6 5.5
Peringkat #273 #277
Keandalan 9.9 10.0
Konsistensi 5.6 10.0
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 50.0% 40.9%
Tes tidak stabil 12 0
Total Run 66 66
Biaya per hasil 0.000 ~0.063
Total Biaya $0.134 ~$0.006
Harga input $0.080 / 1M T/A
Harga output $0.200 / 1M T/A
Total token input 118,016 122,463
Token output 148,344 11,445
Token penalaran 506,253 0
Waktu respons (rata-rata) 58.26s 3.12s
Waktu respons (maks) 285.26s 44.76s
Waktu respons (total) 1281.79s 68.69s
Parameter 30B total (3B aktif) 27.3B
Ketersediaan Bobot tersedia Bobot tersedia

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#273 Nemotron 3.5 Lightning

high
Biaya
$0.000
Waktu
92.8s
Token
11,343 tok

#277 Qwen3.8 27B

none
Biaya
~$0.001
Waktu
23.9s
Token
1,922 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 168.41s 7,623 68,533 242,319
Qwen3.8 27B 5.5 10.0 33.3% 0 1.19s 7,911 408 0

Perbandingan Cepat

Ganti Pasangan Perbandingan