Claude Haiku 5.5 (low) vs Nemotron 3.5 Lightning (medium)

Claude Haiku 5.5 (low) average score मध्ये पुढे आहे: 8.6 vs 4.7. Claude Haiku 5.5 (low) चा benchmark खर्च कमी आहे: $0.061 vs $0.195. Claude Haiku 5.5 (low) वेगवान आहे: 7.51s vs 81.93s, pass rates 76.8% vs 47.8%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-11-10

तुलना केलेली मॉडेल्स

क्रमांक: #94
एकूण आउटपुट टोकन्स: 61,650
प्रतिसाद वेळ (सरासरी): 7.51s
एकूण खर्च: $0.061

क्रमांक: #400
एकूण आउटपुट टोकन्स: 732,696
प्रतिसाद वेळ (सरासरी): 81.93s
एकूण खर्च: $0.195

शिफारस केलेले मॉडेल Claude Haiku 5.5 (low)

It has the best score here (8.6), while costing about 3.2x less than Nemotron 3.5 Lightning (medium).

तपशीलवार तुलना

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium प्रकाशन: 2026-08-11 मोफत उपलब्ध

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium प्रकाशन: 2026-08-11 मोफत उपलब्ध
स्कोअर	8.6	4.7
क्रमांक	#94	#400
विश्वसनीयता	10.0	9.8
सुसंगतता	8.9	5.8
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	76.8%	47.8%
अस्थिर चाचण्या	3	12
एकूण रन	69	69
प्रति निकाल खर्च	0.378	0.000
एकूण खर्च	$0.061	$0.195
इनपुट किंमत	$0.100 / 1M	$0.060 / 1M
आउटपुट किंमत	$0.500 / 1M	$0.160 / 1M
कॅश वाचण्याची किंमत	$0.010 / 1M	$0.030 / 1M
कॅश लिहिण्याची किंमत	$0.125 / 1M	लागू नाही
एकूण इनपुट टोकन्स	296,301	195,780
आउटपुट टोकन्स	10,672	167,746
रिझनिंग टोकन्स	50,978	598,384
प्रतिसाद वेळ (सरासरी)	7.51s	81.93s
प्रतिसाद वेळ (कमाल)	44.43s	437.11s
प्रतिसाद वेळ (एकूण)	172.74s	1884.31s
पॅरामीटर्स	~50B	30B एकूण (3B सक्रिय)
उपलब्धता	बंद स्रोत	वेट्स उपलब्ध

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#94 Claude Haiku 5.5

low

खर्च: $0.001
वेळ: 7.4s
टोकन्स: 1,851 tok

#400 Nemotron 3.5 Lightning

medium

खर्च: $0.000
वेळ: 130.5s
टोकन्स: 6,750 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
Nemotron 3.5 Lightning	2.8	1.6	33.3%	1		341.79s	69,450	2,044	3,645

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
Nemotron 3.5 Lightning	6.9	7.9	66.7%	1		12.34s	696	6,904	20,862

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
Nemotron 3.5 Lightning	4.4	5.1	33.3%	2		285.47s	7,623	78,065	297,359

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
Nemotron 3.5 Lightning	6.2	5.8	66.7%	1		136.91s	98,571	15,769	112,376

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
Nemotron 3.5 Lightning	3.7	1.7	50.0%	2		23.24s	7,944	4,195	30,097

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
Nemotron 3.5 Lightning	2.9	4.4	22.2%	2		74.73s	798	54,657	91,174

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
Nemotron 3.5 Lightning	5.5	10.0	0.0%	0		4.36s	516	3,127	3,157

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
Nemotron 3.5 Lightning	8.5	6.8	83.3%	1		3.75s	723	531	4,404

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
Nemotron 3.5 Lightning	4.2	4.4	44.5%	2		10.49s	726	1,170	18,195

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
Nemotron 3.5 Lightning	10.0	10.0	100.0%	0		4.92s	8,526	154	2,518

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
Nemotron 3.5 Lightning	3.0	10.0	0.0%	0		44.02s	207	1,130	14,597

तुलना जोडी बदला

Mercury 2.5 PreviewdefaultvsNemotron 3.5 Lightningmediumमोफत उपलब्ध Claude Haiku 5.5lowvsParticle-1medium North Mini Codedefaultमोफत उपलब्धvsNemotron 3.5 Lightningmediumमोफत उपलब्ध Claude Haiku 5.5lowvsGPT-6.1 Terranone Claude Haiku 5.5lowvsMuse Embermedium Nemotron 3.5 Lightningmediumमोफत उपलब्धvsLaguna S 2.1noneमोफत उपलब्ध Claude Haiku 5.5lowvsGrok 4.6high Granite 4.2 8BhighvsNemotron 3.5 Lightningmediumमोफत उपलब्ध Claude Haiku 5.5lowvsDeepSeek V4.1 Flashmax Claude Haiku 5.5lowvsQwen3.7 Maxmedium Claude Haiku 5.5lowvsMuse Embermax Nemotron 3.5 Lightningmediumमोफत उपलब्धvsGLM 4.7 Flashnone