d1-ultra (default) vs Jev 1.13 (default)

d1-ultra (default) average score मध्ये पुढे आहे: 2.7 vs 2.6. d1-ultra (default) चा benchmark खर्च कमी आहे: $0.003 vs $0.003. d1-ultra (default) वेगवान आहे: 531ms vs 698ms, pass rates 20.3% vs 26.1%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-17

तुलना केलेली मॉडेल्स

क्रमांक: #421
एकूण आउटपुट टोकन्स: 0
प्रतिसाद वेळ (सरासरी): 531ms
एकूण खर्च: $0.003

क्रमांक: #423
एकूण आउटपुट टोकन्स: 18,927
प्रतिसाद वेळ (सरासरी): 698ms
एकूण खर्च: $0.003

शिफारस केलेले मॉडेल d1-ultra (default)

या तुलनेत याचा गुण सर्वाधिक आहे (2.7) आणि 2 मॉडेल्समध्ये खर्च व प्रतिसाद वेळ यांचा एकूण समतोल सर्वोत्तम आहे.

तपशीलवार तुलना

मेट्रिक	d1-ultra d1-ultra default प्रकाशन: 2026-10-17	Jev 1.13 Jev 1.13 default प्रकाशन: 2026-09-18

मेट्रिक	d1-ultra d1-ultra default प्रकाशन: 2026-10-17	Jev 1.13 Jev 1.13 default प्रकाशन: 2026-09-18
स्कोअर	2.7	2.6
क्रमांक	#421	#423
विश्वसनीयता	10.0	10.0
सुसंगतता	4.9	5.2
प्रयत्न	36/69	36/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	20.3%	26.1%
अस्थिर चाचण्या	1	0
एकूण रन	36	36
प्रति निकाल खर्च	0.059	0.047
एकूण खर्च	$0.003	$0.003
इनपुट किंमत	$0.042 / 1M	$0.042 / 1M
आउटपुट किंमत	$0.000 / 1M	$0.000 / 1M
कॅश वाचण्याची किंमत	$0.042 / 1M	लागू नाही
कॅश लिहिण्याची किंमत	लागू नाही	लागू नाही
एकूण इनपुट टोकन्स	55,956	67,092
आउटपुट टोकन्स	0	18,927
रिझनिंग टोकन्स	0	0
प्रतिसाद वेळ (सरासरी)	531ms	698ms
प्रतिसाद वेळ (कमाल)	697ms	1.08s
प्रतिसाद वेळ (एकूण)	6.38s	8.38s
पॅरामीटर्स	-	-
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
d1-ultra	0.0	0.0	0.0%	0		0ms	0	0	0
Jev 1.13	0.0	0.0	0.0%	0		0ms	0	0	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
d1-ultra	4.0	7.5	25.0%	0		432ms	3,216	0	0
Jev 1.13	4.0	7.5	25.0%	0		853ms	11,544	5,037	0

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
d1-ultra	5.3	4.3	55.6%	1		561ms	25,605	0	0
Jev 1.13	2.2	6.7	0.0%	0		598ms	30,072	8,130	0

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
d1-ultra	0.0	0.0	0.0%	0		0ms	0	0	0
Jev 1.13	0.0	0.0	0.0%	0		0ms	0	0	0

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
d1-ultra	6.5	10.0	50.0%	0		587ms	20,619	0	0
Jev 1.13	10.0	10.0	100.0%	0		799ms	14,229	2,763	0

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
d1-ultra	5.3	10.0	33.3%	0		576ms	1,911	0	0
Jev 1.13	7.7	10.0	66.7%	0		632ms	5,526	1,245	0

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
d1-ultra	0.0	0.0	0.0%	0		0ms	0	0	0
Jev 1.13	0.0	0.0	0.0%	0		0ms	0	0	0

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
d1-ultra	1.5	5.0	0.0%	0		571ms	4,167	0	0
Jev 1.13	1.5	5.0	0.0%	0		557ms	4,527	1,641	0

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
d1-ultra	1.7	3.3	0.0%	0		485ms	438	0	0
Jev 1.13	3.3	3.3	33.3%	0		573ms	1,194	111	0

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
d1-ultra	0.0	0.0	0.0%	0		0ms	0	0	0
Jev 1.13	0.0	0.0	0.0%	0		0ms	0	0	0

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
d1-ultra	0.0	0.0	0.0%	0		0ms	0	0	0
Jev 1.13	0.0	0.0	0.0%	0		0ms	0	0	0

तुलना जोडी बदला

Command A+lowvsd1-ultradefault Command A+nonevsd1-ultradefault Command A+lowvsJev 1.13default Command A+nonevsJev 1.13default Command A+highvsd1-ultradefault Command A+highvsJev 1.13default d1-ultradefaultvsXing4.0 29b A4bnoneमोफत उपलब्ध Jev 1.13defaultvsXing4.0 29b A4bnoneमोफत उपलब्ध Command A+mediumvsd1-ultradefault d1-ultradefaultvsGrok 4.20none Command A+mediumvsJev 1.13default Jev 1.13defaultvsGrok 4.20none