Claude Haiku 5.5 (low) vs Nemotron 3.5 Super VL (high)

Claude Haiku 5.5 (low) average score मध्ये पुढे आहे: 8.6 vs 8.4. Claude Haiku 5.5 (low) चा benchmark खर्च कमी आहे: $0.061 vs $0.349. Claude Haiku 5.5 (low) वेगवान आहे: 7.51s vs 49.88s, pass rates 76.8% vs 82.6%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-16

तुलना केलेली मॉडेल्स

क्रमांक: #74
एकूण आउटपुट टोकन्स: 61,650
प्रतिसाद वेळ (सरासरी): 7.51s
एकूण खर्च: $0.061

क्रमांक: #81
एकूण आउटपुट टोकन्स: 608,283
प्रतिसाद वेळ (सरासरी): 49.88s
एकूण खर्च: $0.349

शिफारस केलेले मॉडेल Claude Haiku 5.5 (low)

It has the best score here (8.6), while costing about 5.8x less than Nemotron 3.5 Super VL (high).

तपशीलवार तुलना

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	Nemotron 3.5 Super VL Nemotron 3.5 Super VL high प्रकाशन: 2026-10-15 मोफत उपलब्ध

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	Nemotron 3.5 Super VL Nemotron 3.5 Super VL high प्रकाशन: 2026-10-15 मोफत उपलब्ध
स्कोअर	8.6	8.4
क्रमांक	#74	#81
विश्वसनीयता	10.0	9.9
सुसंगतता	8.9	8.0
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	76.8%	82.6%
अस्थिर चाचण्या	3	6
एकूण रन	69	69
प्रति निकाल खर्च	0.378	2.324
एकूण खर्च	$0.061	$0.349
इनपुट किंमत	$0.100 / 1M	$0.150 / 1M
आउटपुट किंमत	$0.500 / 1M	$0.500 / 1M
कॅश वाचण्याची किंमत	$0.010 / 1M	$0.020 / 1M
कॅश लिहिण्याची किंमत	$0.125 / 1M	लागू नाही
एकूण इनपुट टोकन्स	296,301	296,001
आउटपुट टोकन्स	10,672	8,105
रिझनिंग टोकन्स	50,978	600,178
प्रतिसाद वेळ (सरासरी)	7.51s	49.88s
प्रतिसाद वेळ (कमाल)	44.43s	310.51s
प्रतिसाद वेळ (एकूण)	172.74s	1147.24s
पॅरामीटर्स	~50B	120B एकूण (12B सक्रिय)
उपलब्धता	बंद स्रोत	मुक्त स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#74 Claude Haiku 5.5

low

खर्च: $0.001
वेळ: 7.4s
टोकन्स: 1,851 tok

#81 Nemotron 3.5 Super VL

high

खर्च: $0.005
वेळ: 25.6s
टोकन्स: 9,076 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
Nemotron 3.5 Super VL	10.0	10.0	100.0%	0		112.72s	181,991	1,564	9,403

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
Nemotron 3.5 Super VL	10.0	10.0	100.0%	0		6.75s	696	178	3,733

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
Nemotron 3.5 Super VL	8.4	7.4	88.9%	1		59.18s	7,623	352	133,374

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
Nemotron 3.5 Super VL	7.3	5.8	83.3%	1		183.49s	86,115	5,038	61,085

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
Nemotron 3.5 Super VL	10.0	10.0	100.0%	0		3.65s	7,944	250	5,488

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
Nemotron 3.5 Super VL	4.1	4.4	44.5%	2		113.75s	790	22	362,061

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
Nemotron 3.5 Super VL	6.5	3.4	66.7%	1		14.34s	516	75	2,621

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
Nemotron 3.5 Super VL	8.5	6.8	83.3%	1		6.10s	723	75	2,466

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
Nemotron 3.5 Super VL	10.0	10.0	100.0%	0		4.32s	726	225	6,843

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
Nemotron 3.5 Super VL	10.0	10.0	100.0%	0		35.56s	8,670	273	996

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
Nemotron 3.5 Super VL	3.0	10.0	0.0%	0		39.39s	207	53	12,108

तुलना जोडी बदला