Claude Haiku 5.5 (high) vs DeepSeek V4.1 Flash 1017 (high)

Claude Haiku 5.5 (high) average score मध्ये पुढे आहे: 8.3 vs 7.8. Claude Haiku 5.5 (high) चा benchmark खर्च कमी आहे: $0.088 vs $0.589. Claude Haiku 5.5 (high) वेगवान आहे: 10.41s vs 58.56s, pass rates 76.8% vs 71.0%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-19

तुलना केलेली मॉडेल्स

क्रमांक: #92
एकूण आउटपुट टोकन्स: 105,640
प्रतिसाद वेळ (सरासरी): 10.41s
एकूण खर्च: $0.088

क्रमांक: #126
एकूण आउटपुट टोकन्स: 911,334
प्रतिसाद वेळ (सरासरी): 58.56s
एकूण खर्च: $0.589

शिफारस केलेले मॉडेल Claude Haiku 5.5 (high)

It has the best score here (8.3), while costing about 6.7x less than DeepSeek V4.1 Flash 1017 (high).

तपशीलवार तुलना

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 high प्रकाशन: 2026-10-07	DeepSeek V4.1 Flash 1017 DeepSeek V4.1 Flash 1017 high प्रकाशन: 2026-10-18

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 high प्रकाशन: 2026-10-07	DeepSeek V4.1 Flash 1017 DeepSeek V4.1 Flash 1017 high प्रकाशन: 2026-10-18
स्कोअर	8.3	7.8
क्रमांक	#92	#126
विश्वसनीयता	10.0	10.0
सुसंगतता	8.5	7.8
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	76.8%	71.0%
अस्थिर चाचण्या	4	6
एकूण रन	69	69
प्रति निकाल खर्च	0.584	4.530
एकूण खर्च	$0.088	$0.589
इनपुट किंमत	$0.100 / 1M	$0.150 / 1M
आउटपुट किंमत	$0.500 / 1M	$0.600 / 1M
कॅश वाचण्याची किंमत	$0.010 / 1M	$0.003 / 1M
कॅश लिहिण्याची किंमत	$0.125 / 1M	लागू नाही
एकूण इनपुट टोकन्स	346,451	279,873
आउटपुट टोकन्स	10,136	7,049
रिझनिंग टोकन्स	95,504	904,285
प्रतिसाद वेळ (सरासरी)	10.41s	58.56s
प्रतिसाद वेळ (कमाल)	52.61s	440.77s
प्रतिसाद वेळ (एकूण)	239.38s	1346.87s
पॅरामीटर्स	~50B	~748B एकूण (~16B सक्रिय)
उपलब्धता	बंद स्रोत	मुक्त स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#92 Claude Haiku 5.5

high

खर्च: $0.003
वेळ: 28.0s
टोकन्स: 5,775 tok

#126 DeepSeek V4.1 Flash 1017

high

खर्च: $0.004
वेळ: 27.2s
टोकन्स: 7,593 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		52.61s	206,189	2,382	10,134
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		43.53s	144,680	1,907	4,293

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		2.70s	858	551	2,399
DeepSeek V4.1 Flash 1017	8.3	10.0	75.0%	0		2.10s	627	137	2,440

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	6.0	7.2	55.6%	1		9.54s	10,608	503	16,741
DeepSeek V4.1 Flash 1017	4.5	1.4	66.7%	3		196.67s	7,434	217	446,179

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		30.00s	102,723	4,896	29,883
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		37.28s	107,806	3,862	41,936

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.77s	10,515	312	2,031
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		2.20s	7,446	207	1,450

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	4.1	4.4	44.5%	2		16.29s	990	65	25,349
DeepSeek V4.1 Flash 1017	3.5	4.4	33.3%	2		186.02s	909	11	382,250

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.89s	714	208	1,603
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		2.02s	549	120	570

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	9.9	10.0	100.0%	0		3.19s	921	99	1,723
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		1.12s	708	69	866

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.9	7.2	55.6%	1		3.28s	912	615	3,202
DeepSeek V4.1 Flash 1017	5.5	7.4	44.4%	1		5.70s	828	235	7,784

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		5.34s	11,757	354	849
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		2.28s	8,625	267	305

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	3.0	10.0	0.0%	0		4.49s	264	151	1,590
DeepSeek V4.1 Flash 1017	3.0	10.0	0.0%	0		44.26s	261	17	16,212

तुलना जोडी बदला