Claude Sonnet 5 (medium) vs Nemotron 3.5 Super VL (high)

Claude Sonnet 5 (medium) average score में आगे है: 8.5 vs 8.4. Nemotron 3.5 Super VL (high) की benchmark लागत कम है: $0.349 vs $1.438. Claude Sonnet 5 (medium) तेज है: 15.01s vs 49.88s, pass rates 76.8% vs 82.6%.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-10-16

तुलना किए गए मॉडल

रैंक: #78
कुल आउटपुट टोकन: 73,018
प्रतिक्रिया समय (औसत): 15.01s
कुल लागत: $1.438

रैंक: #81
कुल आउटपुट टोकन: 608,283
प्रतिक्रिया समय (औसत): 49.88s
कुल लागत: $0.349

अनुशंसित मॉडल Nemotron 3.5 Super VL (high)

Its score stays close to the best score here (8.4 vs 8.5), while costing about 4.1x less than Claude Sonnet 5 (medium).

विस्तृत तुलना

मेट्रिक	Claude Sonnet 5 Claude Sonnet 5 medium रिलीज़: 2026-06-30	Nemotron 3.5 Super VL Nemotron 3.5 Super VL high रिलीज़: 2026-10-15 निःशुल्क उपलब्ध

मेट्रिक	Claude Sonnet 5 Claude Sonnet 5 medium रिलीज़: 2026-06-30	Nemotron 3.5 Super VL Nemotron 3.5 Super VL high रिलीज़: 2026-10-15 निःशुल्क उपलब्ध
स्कोर	8.5	8.4
रैंक	#78	#81
विश्वसनीयता	10.0	9.9
संगति	9.1	8.0
प्रयास	69/69	69/69
सही परीक्षण
प्रति प्रयास पास दर	76.8%	82.6%
अस्थिर टेस्ट	3	6
कुल रन	69	69
प्रति परिणाम लागत	8.985	2.324
कुल लागत	$1.438	$0.349
इनपुट कीमत	$2.000 / 1M	$0.150 / 1M
आउटपुट कीमत	$10.000 / 1M	$0.500 / 1M
कैश पढ़ने की कीमत	$0.200 / 1M	$0.020 / 1M
कैश लिखने की कीमत	$2.500 / 1M	लागू नहीं
कुल इनपुट टोकन	353,658	296,001
आउटपुट टोकन	54,891	8,105
रीजनिंग टोकन	18,370	600,178
प्रतिक्रिया समय (औसत)	15.01s	49.88s
प्रतिक्रिया समय (अधिकतम)	69.26s	310.51s
प्रतिक्रिया समय (कुल)	345.16s	1147.24s
पैरामीटर	~1T कुल (~100B सक्रिय)	120B कुल (12B सक्रिय)
उपलब्धता	बंद स्रोत	मुक्त स्रोत

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

मॉडल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#78 Claude Sonnet 5

medium

लागत: $0.007
समय: 6.4s
टोकन: 832 tok

#81 Nemotron 3.5 Super VL

high

लागत: $0.005
समय: 25.6s
टोकन: 9,076 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

श्रेणी:

स्वायत्त एजेंट कार्य	स्कोर	संगति	प्रति प्रयास पास दर	अस्थिर टेस्ट	सही परीक्षण	प्रतिक्रिया समय (औसत)	इनपुट टोकन	आउटपुट टोकन	रीजनिंग टोकन
Claude Sonnet 5	10.0	10.0	100.0%	0		69.26s	207,705	2,561	7,496
Nemotron 3.5 Super VL	10.0	10.0	100.0%	0		112.72s	181,991	1,564	9,403

एंटी-एआई ट्रिक्स	स्कोर	संगति	प्रति प्रयास पास दर	अस्थिर टेस्ट	सही परीक्षण	प्रतिक्रिया समय (औसत)	इनपुट टोकन	आउटपुट टोकन	रीजनिंग टोकन
Claude Sonnet 5	10.0	10.0	100.0%	0		3.80s	834	1,220	446
Nemotron 3.5 Super VL	10.0	10.0	100.0%	0		6.75s	696	178	3,733

कोडिंग	स्कोर	संगति	प्रति प्रयास पास दर	अस्थिर टेस्ट	सही परीक्षण	प्रतिक्रिया समय (औसत)	इनपुट टोकन	आउटपुट टोकन	रीजनिंग टोकन
Claude Sonnet 5	9.0	7.9	88.9%	1		17.28s	10,590	13,153	2,379
Nemotron 3.5 Super VL	8.4	7.4	88.9%	1		59.18s	7,623	352	133,374

संयुक्त	स्कोर	संगति	प्रति प्रयास पास दर	अस्थिर टेस्ट	सही परीक्षण	प्रतिक्रिया समय (औसत)	इनपुट टोकन	आउटपुट टोकन	रीजनिंग टोकन
Claude Sonnet 5	7.3	6.0	83.3%	1		51.86s	107,934	23,169	5,371
Nemotron 3.5 Super VL	7.3	5.8	83.3%	1		183.49s	86,115	5,038	61,085

डेटा पार्सिंग और निष्कर्षण	स्कोर	संगति	प्रति प्रयास पास दर	अस्थिर टेस्ट	सही परीक्षण	प्रतिक्रिया समय (औसत)	इनपुट टोकन	आउटपुट टोकन	रीजनिंग टोकन
Claude Sonnet 5	10.0	10.0	100.0%	0		3.16s	10,503	312	0
Nemotron 3.5 Super VL	10.0	10.0	100.0%	0		3.65s	7,944	250	5,488

डोमेन-विशिष्ट	स्कोर	संगति	प्रति प्रयास पास दर	अस्थिर टेस्ट	सही परीक्षण	प्रतिक्रिया समय (औसत)	इनपुट टोकन	आउटपुट टोकन	रीजनिंग टोकन
Claude Sonnet 5	5.3	10.0	33.3%	0		20.54s	972	12,137	1,994
Nemotron 3.5 Super VL	4.1	4.4	44.5%	2		113.75s	790	22	362,061

Samanya Buddhimatta	स्कोर	संगति	प्रति प्रयास पास दर	अस्थिर टेस्ट	सही परीक्षण	प्रतिक्रिया समय (औसत)	इनपुट टोकन	आउटपुट टोकन	रीजनिंग टोकन
Claude Sonnet 5	4.8	3.2	33.3%	1		4.32s	708	264	0
Nemotron 3.5 Super VL	6.5	3.4	66.7%	1		14.34s	516	75	2,621

निर्देश पालन	स्कोर	संगति	प्रति प्रयास पास दर	अस्थिर टेस्ट	सही परीक्षण	प्रतिक्रिया समय (औसत)	इनपुट टोकन	आउटपुट टोकन	रीजनिंग टोकन
Claude Sonnet 5	9.9	10.0	100.0%	0		3.10s	909	318	269
Nemotron 3.5 Super VL	8.5	6.8	83.3%	1		6.10s	723	75	2,466

पहेली समाधान	स्कोर	संगति	प्रति प्रयास पास दर	अस्थिर टेस्ट	सही परीक्षण	प्रतिक्रिया समय (औसत)	इनपुट टोकन	आउटपुट टोकन	रीजनिंग टोकन
Claude Sonnet 5	7.7	10.0	66.7%	0		2.98s	894	407	121
Nemotron 3.5 Super VL	10.0	10.0	100.0%	0		4.32s	726	225	6,843

टूल कॉलिंग	स्कोर	संगति	प्रति प्रयास पास दर	अस्थिर टेस्ट	सही परीक्षण	प्रतिक्रिया समय (औसत)	इनपुट टोकन	आउटपुट टोकन	रीजनिंग टोकन
Claude Sonnet 5	10.0	10.0	100.0%	0		10.70s	12,351	433	90
Nemotron 3.5 Super VL	10.0	10.0	100.0%	0		35.56s	8,670	273	996

सामान्य ज्ञान	स्कोर	संगति	प्रति प्रयास पास दर	अस्थिर टेस्ट	सही परीक्षण	प्रतिक्रिया समय (औसत)	इनपुट टोकन	आउटपुट टोकन	रीजनिंग टोकन
Claude Sonnet 5	3.0	10.0	0.0%	0		7.06s	258	917	204
Nemotron 3.5 Super VL	3.0	10.0	0.0%	0		39.39s	207	53	12,108

तुलना जोड़ी बदलें

Claude Sonnet 5mediumvsMuse Spark 1.3low Nemotron 3.5 Super VLhighनिःशुल्क उपलब्धvsQwen3.8 2.4T A95Blow Nemotron 3.5 Super VLhighनिःशुल्क उपलब्धvsGPT-5 Minimedium Muse Glimmer 30BxhighvsNemotron 3.5 Super VLhighनिःशुल्क उपलब्ध Claude Sonnet 5mediumvsGrok 4.6high Gemini 3.1 Pro PreviewmediumvsNemotron 3.5 Super VLhighनिःशुल्क उपलब्ध Claude Haiku 5.5maxvsNemotron 3.5 Super VLhighनिःशुल्क उपलब्ध Claude Sonnet 5mediumvsQwen3.8 Max (0902)low Nemotron 3.5 Super VLhighनिःशुल्क उपलब्धvsQwen3.7 Maxmedium Muse Spark 1.3lowvsNemotron 3.5 Super VLhighनिःशुल्क उपलब्ध Claude Sonnet 5mediumvsQwen3.8 2.4T A95Blow Claude Sonnet 5mediumvsMuse Glimmer 30Bxhigh