ERNIE-Light-DT-1.0 vs Nemotron 3 Super (medium)

ERNIE-Light-DT-1.0 average score मध्ये पुढे आहे: 5.6 vs 5.5. Nemotron 3 Super (medium) चा benchmark खर्च कमी आहे: $0.081 vs $0.524. ERNIE-Light-DT-1.0 वेगवान आहे: 24.16s vs 56.40s, pass rates 36.2% vs 42.0%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-11-13

तुलना केलेली मॉडेल्स

क्रमांक: #357
एकूण आउटपुट टोकन्स: 76,149
प्रतिसाद वेळ (सरासरी): 24.16s
एकूण खर्च: $0.524

क्रमांक: #361
एकूण आउटपुट टोकन्स: 137,691
प्रतिसाद वेळ (सरासरी): 56.40s
एकूण खर्च: $0.081

शिफारस केलेले मॉडेल Nemotron 3 Super (medium)

Its score stays close to the best score here (5.5 vs 5.6), while costing about 6.5x less than ERNIE-Light-DT-1.0.

तपशीलवार तुलना

मेट्रिक	ERNIE-Light-DT-1.0 ERNIE-Light-DT-1.0 none प्रकाशन: 2026-11-12	Nemotron 3 Super Nemotron 3 Super medium प्रकाशन: 2026-03-11 मोफत उपलब्ध

मेट्रिक	ERNIE-Light-DT-1.0 ERNIE-Light-DT-1.0 none प्रकाशन: 2026-11-12	Nemotron 3 Super Nemotron 3 Super medium प्रकाशन: 2026-03-11 मोफत उपलब्ध
स्कोअर	5.6	5.5
क्रमांक	#357	#361
विश्वसनीयता	9.2	9.5
सुसंगतता	9.7	8.5
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	36.2%	42.0%
अस्थिर चाचण्या	1	4
एकूण रन	69	69
प्रति निकाल खर्च	6.545	0.004
एकूण खर्च	$0.524	$0.081
इनपुट किंमत	$1.130 / 1M	$0.080 / 1M
आउटपुट किंमत	$3.941 / 1M	$0.450 / 1M
कॅश वाचण्याची किंमत	$0.113 / 1M	लागू नाही
कॅश लिहिण्याची किंमत	लागू नाही	लागू नाही
एकूण इनपुट टोकन्स	197,790	229,346
आउटपुट टोकन्स	76,149	18,597
रिझनिंग टोकन्स	0	129,338
प्रतिसाद वेळ (सरासरी)	24.16s	56.40s
प्रतिसाद वेळ (कमाल)	449.96s	431.98s
प्रतिसाद वेळ (एकूण)	555.78s	1184.46s
पॅरामीटर्स	~320B एकूण (~18B सक्रिय)	120B एकूण (12B सक्रिय)
उपलब्धता	बंद स्रोत	वेट्स उपलब्ध

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#357 ERNIE-Light-DT-1.0

none

खर्च: $0.009
वेळ: 14.9s
टोकन्स: 2,144 tok

#361 Nemotron 3 Super

medium

खर्च: $0.000
वेळ: 272.6s
टोकन्स: 5,296 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	5.0	10.0	0.0%	0		49.88s	111,179	910	0
Nemotron 3 Super	4.7	1.6	66.7%	1		138.25s	147,908	923	31,438

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	5.3	10.0	25.0%	0		1.68s	651	665	0
Nemotron 3 Super	8.3	10.0	75.0%	0		7.85s	686	748	1,305

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	4.3	7.4	11.1%	1		151.72s	6,005	68,639	0
Nemotron 3 Super	3.1	10.0	0.0%	0		147.32s	2,275	797	4,424

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	3.0	10.0	0.0%	0		10.41s	63,086	4,968	0
Nemotron 3 Super	6.4	5.8	66.7%	1		259.89s	59,463	5,542	75,095

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	10.0	10.0	100.0%	0		1.36s	7,155	204	0
Nemotron 3 Super	10.0	10.0	100.0%	0		18.16s	7,944	877	2,607

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	5.3	10.0	33.3%	0		1.25s	768	24	0
Nemotron 3 Super	2.9	4.4	22.2%	2		19.35s	465	4,558	5,119

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	5.3	10.0	0.0%	0		1.44s	501	159	0
Nemotron 3 Super	4.1	10.0	0.0%	0		6.91s	492	105	363

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	6.5	10.0	50.0%	0		1.27s	684	63	0
Nemotron 3 Super	7.3	10.0	50.0%	0		6.97s	723	956	2,383

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	7.7	10.0	66.7%	0		1.54s	681	277	0
Nemotron 3 Super	3.0	10.0	0.0%	0		3.15s	708	570	1,322

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	10.0	10.0	100.0%	0		6.15s	6,870	222	0
Nemotron 3 Super	10.0	10.0	100.0%	0		39.75s	8,544	270	1,969

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	3.0	10.0	0.0%	0		1.98s	210	18	0
Nemotron 3 Super	3.0	10.0	0.0%	0		55.32s	138	3,251	3,313

तुलना जोडी बदला