Claude Haiku 5.5 (low) vs DeepSeek V4.1 Flash 1017 (high)

Claude Haiku 5.5 (low) average score मध्ये पुढे आहे: 8.6 vs 7.8. Claude Haiku 5.5 (low) चा benchmark खर्च कमी आहे: $0.061 vs $0.589. Claude Haiku 5.5 (low) वेगवान आहे: 7.51s vs 58.56s, pass rates 76.8% vs 71.0%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-19

तुलना केलेली मॉडेल्स

क्रमांक: #75
एकूण आउटपुट टोकन्स: 61,650
प्रतिसाद वेळ (सरासरी): 7.51s
एकूण खर्च: $0.061

क्रमांक: #126
एकूण आउटपुट टोकन्स: 911,334
प्रतिसाद वेळ (सरासरी): 58.56s
एकूण खर्च: $0.589

शिफारस केलेले मॉडेल Claude Haiku 5.5 (low)

It has the best score here (8.6), while costing about 9.7x less than DeepSeek V4.1 Flash 1017 (high).

तपशीलवार तुलना

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	DeepSeek V4.1 Flash 1017 DeepSeek V4.1 Flash 1017 high प्रकाशन: 2026-10-18

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	DeepSeek V4.1 Flash 1017 DeepSeek V4.1 Flash 1017 high प्रकाशन: 2026-10-18
स्कोअर	8.6	7.8
क्रमांक	#75	#126
विश्वसनीयता	10.0	10.0
सुसंगतता	8.9	7.8
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	76.8%	71.0%
अस्थिर चाचण्या	3	6
एकूण रन	69	69
प्रति निकाल खर्च	0.378	4.530
एकूण खर्च	$0.061	$0.589
इनपुट किंमत	$0.100 / 1M	$0.150 / 1M
आउटपुट किंमत	$0.500 / 1M	$0.600 / 1M
कॅश वाचण्याची किंमत	$0.010 / 1M	$0.003 / 1M
कॅश लिहिण्याची किंमत	$0.125 / 1M	लागू नाही
एकूण इनपुट टोकन्स	296,301	279,873
आउटपुट टोकन्स	10,672	7,049
रिझनिंग टोकन्स	50,978	904,285
प्रतिसाद वेळ (सरासरी)	7.51s	58.56s
प्रतिसाद वेळ (कमाल)	44.43s	440.77s
प्रतिसाद वेळ (एकूण)	172.74s	1346.87s
पॅरामीटर्स	~50B	~748B एकूण (~16B सक्रिय)
उपलब्धता	बंद स्रोत	मुक्त स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#75 Claude Haiku 5.5

low

खर्च: $0.001
वेळ: 7.4s
टोकन्स: 1,851 tok

#126 DeepSeek V4.1 Flash 1017

high

खर्च: $0.004
वेळ: 27.2s
टोकन्स: 7,593 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		43.53s	144,680	1,907	4,293

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
DeepSeek V4.1 Flash 1017	8.3	10.0	75.0%	0		2.10s	627	137	2,440

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
DeepSeek V4.1 Flash 1017	4.5	1.4	66.7%	3		196.67s	7,434	217	446,179

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		37.28s	107,806	3,862	41,936

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		2.20s	7,446	207	1,450

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
DeepSeek V4.1 Flash 1017	3.5	4.4	33.3%	2		186.02s	909	11	382,250

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		2.02s	549	120	570

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		1.12s	708	69	866

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
DeepSeek V4.1 Flash 1017	5.5	7.4	44.4%	1		5.70s	828	235	7,784

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
DeepSeek V4.1 Flash 1017	10.0	10.0	100.0%	0		2.28s	8,625	267	305

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
DeepSeek V4.1 Flash 1017	3.0	10.0	0.0%	0		44.26s	261	17	16,212

तुलना जोडी बदला