NVIDIA: Nemotron 3 Ultra vs Qwen: Qwen3.5-Flash

Qwen3.5-Flash (medium) unggul dalam skor rata-rata dengan 6.2 vs 6.1. Nemotron 3 Ultra memiliki biaya benchmark lebih rendah di $0.095 vs $0.139. Nemotron 3 Ultra lebih cepat di 3.87s vs 84.82s, dengan tingkat keberhasilan 42.4% vs 69.7%.

Model yang direkomendasikanNemotron 3 UltraIts score stays close to the best score here (6.1 vs 6.2), while responding about 21.9x faster than Qwen3.5-Flash (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-20

Metrik	Nemotron 3 Ultra Nemotron 3 Ultra none Rilis: 2026-06-04 Tersedia gratis	Qwen3.5-Flash Qwen3.5-Flash medium Rilis: 2026-02-24

Metrik	Nemotron 3 Ultra Nemotron 3 Ultra none Rilis: 2026-06-04 Tersedia gratis	Qwen3.5-Flash Qwen3.5-Flash medium Rilis: 2026-02-24
Skor	6.1	6.2
Peringkat	#129	#114
Keandalan	10.0	10.0
Konsistensi	9.3	7.8
Tes benar
Tingkat lulus per percobaan	42.4%	69.7%
Tes tidak stabil	2	6
Total Run	66	66
Biaya per hasil	0.000	1.361
Total Biaya	$0.095	$0.139
Harga input	$0.600 / 1M	$0.065 / 1M
Harga output	$3.600 / 1M	$0.260 / 1M
Total token input	101,275	118,499
Token output	9,474	12,284
Token penalaran	0	490,610
Waktu respons (rata-rata)	3.87s	84.82s
Waktu respons (maks)	37.50s	515.38s
Waktu respons (total)	85.15s	1781.22s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#129 Nemotron 3 Ultra

none

Biaya: $0.000
Waktu: 149.6s
Token: 3,405 tok

#114 Qwen3.5-Flash

medium

Biaya: $0.002
Waktu: 25.8s
Token: 4,294 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Nemotron 3 Ultra	3.5	8.0	16.7%	1		2.35s	696	239	0
Qwen3.5-Flash	10.0	10.0	100.0%	0		59.11s	672	383	32,992

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Nemotron 3 Ultra	5.5	10.0	33.3%	0		1.02s	7,623	369	0
Qwen3.5-Flash	3.7	7.2	22.2%	1		58.87s	6,685	302	90,081

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Nemotron 3 Ultra	3.0	10.0	0.0%	0		21.14s	73,507	7,693	0
Qwen3.5-Flash	6.4	5.8	66.7%	1		266.58s	94,507	10,679	204,282

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Nemotron 3 Ultra	10.0	10.0	100.0%	0		1.94s	7,944	249	0
Qwen3.5-Flash	7.3	5.9	83.3%	1		56.99s	6,061	235	16,237

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Nemotron 3 Ultra	5.3	10.0	33.3%	0		698ms	789	27	0
Qwen3.5-Flash	5.3	7.2	44.4%	1		146.50s	581	58	43,615

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Nemotron 3 Ultra	5.0	10.0	0.0%	0		13.49s	516	101	0
Qwen3.5-Flash	6.1	3.1	66.7%	1		40.05s	516	99	38,486

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Nemotron 3 Ultra	10.0	10.0	100.0%	0		1.46s	723	69	0
Qwen3.5-Flash	10.0	10.0	100.0%	0		63.49s	699	98	14,139

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Nemotron 3 Ultra	5.9	7.2	55.6%	1		1.06s	726	352	0
Qwen3.5-Flash	8.2	7.2	88.9%	1		27.61s	381	89	12,457

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Nemotron 3 Ultra	10.0	10.0	100.0%	0		2.99s	8,544	264	0
Qwen3.5-Flash	10.0	10.0	100.0%	0		10.33s	8,193	309	1,284

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Nemotron 3 Ultra	3.0	10.0	0.0%	0		1.83s	207	111	0
Qwen3.5-Flash	3.0	10.0	0.0%	0		48.98s	204	32	37,037

Perbandingan Cepat

Ganti Pasangan Perbandingan

Nemotron 3 UltranoneTersedia gratisvsGPT-5 Nanomedium Gemma 4 31BnoneTersedia gratisvsQwen3.5-Flashmedium Nemotron 3 UltranoneTersedia gratisvsStep 3.5 Flashmedium Claude Sonnet 5nonevsQwen3.5-Flashmedium Seed-2.0-LitenonevsQwen3.5-Flashmedium GPT-5.6 LunalowvsQwen3.5-Flashmedium LongCat 2.0nonevsQwen3.5-Flashmedium Nemotron 3 UltranoneTersedia gratisvsInklinglow Nemotron 3 UltranoneTersedia gratisvsgpt-oss-120bmedium Gemini 3.1 Flash LiteminimalvsNemotron 3 UltranoneTersedia gratis Gemini 2.5 FlashnonevsQwen3.5-Flashmedium Nemotron 3 UltranoneTersedia gratisvsQwen3.5-35B-A3Bmedium