ERNIE-Light-DT-1.0 (max) vs Gemini 3.5 Flash Lite (high)

average score जवळपास समान आहे: 9.0 vs 9.0. Gemini 3.5 Flash Lite (high) चा benchmark खर्च कमी आहे: $0.624 vs $4.353. Gemini 3.5 Flash Lite (high) वेगवान आहे: 11.92s vs 103.37s, pass rates 81.2% vs 84.1%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-11-13

तुलना केलेली मॉडेल्स

क्रमांक: #66
एकूण आउटपुट टोकन्स: 1,003,960
प्रतिसाद वेळ (सरासरी): 103.37s
एकूण खर्च: $4.353

क्रमांक: #67
एकूण आउटपुट टोकन्स: 219,926
प्रतिसाद वेळ (सरासरी): 11.92s
एकूण खर्च: $0.624

शिफारस केलेले मॉडेल Gemini 3.5 Flash Lite (high)

It has the best score here (9.0), while costing about 7.0x less than ERNIE-Light-DT-1.0 (max).

तपशीलवार तुलना

मेट्रिक	ERNIE-Light-DT-1.0 ERNIE-Light-DT-1.0 max प्रकाशन: 2026-11-12	Gemini 3.5 Flash Lite Gemini 3.5 Flash Lite high प्रकाशन: 2026-07-21

मेट्रिक	ERNIE-Light-DT-1.0 ERNIE-Light-DT-1.0 max प्रकाशन: 2026-11-12	Gemini 3.5 Flash Lite Gemini 3.5 Flash Lite high प्रकाशन: 2026-07-21
स्कोअर	9.0	9.0
क्रमांक	#66	#67
विश्वसनीयता	8.9	10.0
सुसंगतता	9.6	9.3
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	81.2%	84.1%
अस्थिर चाचण्या	1	2
एकूण रन	69	69
प्रति निकाल खर्च	24.179	3.463
एकूण खर्च	$4.353	$0.624
इनपुट किंमत	$1.130 / 1M	$0.300 / 1M
आउटपुट किंमत	$3.941 / 1M	$2.500 / 1M
कॅश वाचण्याची किंमत	$0.113 / 1M	$0.030 / 1M
कॅश लिहिण्याची किंमत	लागू नाही	$0.084 / 1M
एकूण इनपुट टोकन्स	350,977	244,529
आउटपुट टोकन्स	6,155	6,784
रिझनिंग टोकन्स	997,807	213,142
प्रतिसाद वेळ (सरासरी)	103.37s	11.92s
प्रतिसाद वेळ (कमाल)	473.48s	53.09s
प्रतिसाद वेळ (एकूण)	2377.50s	274.14s
पॅरामीटर्स	~320B एकूण (~18B सक्रिय)	~150B एकूण (~10B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#66 ERNIE-Light-DT-1.0

max

OpenRouter returned no showcase content (finish_reason: length).

खर्च: $0.259
वेळ: 533.2s
टोकन्स: 65,656 tok

#67 Gemini 3.5 Flash Lite

high

खर्च: $0.025
वेळ: 36.8s
टोकन्स: 9,964 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	10.0	10.0	100.0%	0		66.71s	163,484	1,425	9,658
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		53.09s	151,483	900	14,401

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	10.0	10.0	100.0%	0		2.68s	639	223	2,335
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		2.96s	498	142	7,917

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	10.0	10.0	100.0%	0		97.26s	7,317	602	123,649
Gemini 3.5 Flash Lite	8.4	7.4	88.9%	1		16.58s	8,130	434	57,369

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	7.3	5.8	83.3%	1		182.42s	161,595	2,844	171,623
Gemini 3.5 Flash Lite	9.9	10.0	100.0%	0		27.90s	68,427	4,360	52,993

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	10.0	10.0	100.0%	0		5.19s	7,149	210	3,302
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		3.17s	7,362	279	5,636

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	3.0	10.0	0.0%	0		460.57s	759	5	584,355
Gemini 3.5 Flash Lite	3.6	7.2	22.2%	1		23.14s	656	17	54,566

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	10.0	10.0	100.0%	0		4.03s	498	148	1,067
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		3.10s	488	81	2,124

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	9.8	10.0	100.0%	0		2.47s	678	72	1,061
Gemini 3.5 Flash Lite	9.8	10.0	100.0%	0		2.16s	625	69	3,513

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	10.0	10.0	100.0%	0		2.95s	672	334	1,714
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		2.09s	572	183	4,004

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	10.0	10.0	100.0%	0		6.43s	7,979	231	761
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		4.55s	6,132	310	2,955

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
ERNIE-Light-DT-1.0	3.0	10.0	0.0%	0		227.09s	207	61	98,282
Gemini 3.5 Flash Lite	3.0	10.0	0.0%	0		9.68s	156	9	7,664

तुलना जोडी बदला