Mistral Small 4 (medium) vs Nemotron 3.5 Lightning (high)

Nemotron 3.5 Lightning (high) average score मध्ये पुढे आहे: 5.2 vs 5.1. Nemotron 3.5 Lightning (high) चा benchmark खर्च कमी आहे: $0.111 vs $0.126. Mistral Small 4 (medium) वेगवान आहे: 12.68s vs 77.08s, pass rates 42.0% vs 47.8%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-01

तुलना केलेली मॉडेल्स

क्रमांक: #291
एकूण आउटपुट टोकन्स: 136,501
प्रतिसाद वेळ (सरासरी): 12.68s
एकूण खर्च: $0.126

क्रमांक: #287
एकूण आउटपुट टोकन्स: 659,693
प्रतिसाद वेळ (सरासरी): 77.08s
एकूण खर्च: $0.111

शिफारस केलेले मॉडेल Mistral Small 4 (medium)

Its score stays close to the best score here (5.1 vs 5.2), while responding about 6.1x faster than Nemotron 3.5 Lightning (high).

तपशीलवार तुलना

मेट्रिक	Mistral Small 4 Mistral Small 4 medium प्रकाशन: 2026-03-16	Nemotron 3.5 Lightning Nemotron 3.5 Lightning high प्रकाशन: 2026-08-11 मोफत उपलब्ध

मेट्रिक	Mistral Small 4 Mistral Small 4 medium प्रकाशन: 2026-03-16	Nemotron 3.5 Lightning Nemotron 3.5 Lightning high प्रकाशन: 2026-08-11 मोफत उपलब्ध
स्कोअर	5.1	5.2
क्रमांक	#291	#287
विश्वसनीयता	9.7	9.6
सुसंगतता	7.1	5.7
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	42.0%	47.8%
अस्थिर चाचण्या	8	12
एकूण रन	69	69
प्रति निकाल खर्च	2.502	0.000
एकूण खर्च	$0.126	$0.111
इनपुट किंमत	$0.150 / 1M	$0.060 / 1M
आउटपुट किंमत	$0.600 / 1M	$0.160 / 1M
एकूण इनपुट टोकन्स	321,955	170,517
आउटपुट टोकन्स	41,555	149,968
रिझनिंग टोकन्स	94,946	509,725
प्रतिसाद वेळ (सरासरी)	12.68s	77.08s
प्रतिसाद वेळ (कमाल)	59.15s	490.99s
प्रतिसाद वेळ (एकूण)	291.66s	1772.78s
पॅरामीटर्स	119B एकूण (6B सक्रिय)	30B एकूण (3B सक्रिय)
उपलब्धता	मुक्त स्रोत	वेट्स उपलब्ध

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#291 Mistral Small 4

medium

खर्च: $0.006
वेळ: 47.9s
टोकन्स: 9,857 tok

#287 Nemotron 3.5 Lightning

high

खर्च: $0.000
वेळ: 92.8s
टोकन्स: 11,343 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mistral Small 4	5.0	10.0	0.0%	0		54.05s	181,396	1,287	1,617
Nemotron 3.5 Lightning	3.5	8.3	0.0%	0		490.99s	52,501	1,624	3,472

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778
Nemotron 3.5 Lightning	5.5	3.7	66.7%	3		10.29s	696	2,432	15,948

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715
Nemotron 3.5 Lightning	4.4	5.1	33.3%	2		168.41s	7,623	68,533	242,319

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mistral Small 4	3.0	10.0	0.0%	0		32.40s	116,624	17,890	18,384
Nemotron 3.5 Lightning	6.4	10.0	50.0%	0		160.45s	90,257	17,550	119,725

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723
Nemotron 3.5 Lightning	7.3	5.9	83.3%	1		13.99s	7,944	3,210	16,835

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mistral Small 4	5.9	7.2	55.6%	1		6.33s	807	3,427	7,871
Nemotron 3.5 Lightning	2.9	4.4	22.2%	2		88.61s	798	45,616	72,496

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828
Nemotron 3.5 Lightning	3.7	9.5	0.0%	0		7.58s	516	4,331	4,408

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031
Nemotron 3.5 Lightning	8.5	6.8	83.3%	1		4.98s	723	502	3,779

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632
Nemotron 3.5 Lightning	3.6	1.8	44.4%	3		6.09s	726	1,236	9,851

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810
Nemotron 3.5 Lightning	10.0	10.0	100.0%	0		6.92s	8,526	3,745	3,781

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557
Nemotron 3.5 Lightning	3.0	10.0	0.0%	0		77.98s	207	1,189	17,111

झटपट तुलना

तुलना जोडी बदला