Claude Haiku 5.5 (low) vs Beam 1.0 501B A23B (high)

Claude Haiku 5.5 (low) average score मध्ये पुढे आहे: 8.6 vs 6.1. Claude Haiku 5.5 (low) चा benchmark खर्च कमी आहे: $0.061 vs $0.674. Claude Haiku 5.5 (low) वेगवान आहे: 7.51s vs 9.03s, pass rates 76.8% vs 59.4%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-17

तुलना केलेली मॉडेल्स

क्रमांक: #74
एकूण आउटपुट टोकन्स: 61,650
प्रतिसाद वेळ (सरासरी): 7.51s
एकूण खर्च: $0.061

क्रमांक: #266
एकूण आउटपुट टोकन्स: 147,207
प्रतिसाद वेळ (सरासरी): 9.03s
एकूण खर्च: $0.674

शिफारस केलेले मॉडेल Claude Haiku 5.5 (low)

It has the best score here (8.6), while costing about 11.1x less than Beam 1.0 501B A23B (high).

तपशीलवार तुलना

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	Beam 1.0 501B A23B Beam 1.0 501B A23B high प्रकाशन: 2026-10-17

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 low प्रकाशन: 2026-10-07	Beam 1.0 501B A23B Beam 1.0 501B A23B high प्रकाशन: 2026-10-17
स्कोअर	8.6	6.1
क्रमांक	#74	#266
विश्वसनीयता	10.0	10.0
सुसंगतता	8.9	8.3
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	76.8%	59.4%
अस्थिर चाचण्या	3	5
एकूण रन	69	69
प्रति निकाल खर्च	0.378	6.126
एकूण खर्च	$0.061	$0.674
इनपुट किंमत	$0.100 / 1M	$1.000 / 1M
आउटपुट किंमत	$0.500 / 1M	$3.000 / 1M
कॅश वाचण्याची किंमत	$0.010 / 1M	$0.100 / 1M
कॅश लिहिण्याची किंमत	$0.125 / 1M	लागू नाही
एकूण इनपुट टोकन्स	296,301	232,218
आउटपुट टोकन्स	10,672	4,944
रिझनिंग टोकन्स	50,978	142,263
प्रतिसाद वेळ (सरासरी)	7.51s	9.03s
प्रतिसाद वेळ (कमाल)	44.43s	36.04s
प्रतिसाद वेळ (एकूण)	172.74s	207.67s
पॅरामीटर्स	~50B	501B एकूण (23B सक्रिय)
उपलब्धता	बंद स्रोत	मुक्त स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#74 Claude Haiku 5.5

low

खर्च: $0.001
वेळ: 7.4s
टोकन्स: 1,851 tok

#266 Beam 1.0 501B A23B

high

खर्च: $0.008
वेळ: 15.6s
टोकन्स: 6,162 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		33.55s	202,053	2,798	11,159

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
Beam 1.0 501B A23B	8.8	8.3	83.3%	1		1.36s	1,125	518	3,068

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
Beam 1.0 501B A23B	8.4	7.4	88.9%	1		21.05s	7,800	559	44,608

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		2.68s	7,671	132	2,425

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
Beam 1.0 501B A23B	10.0	10.0	100.0%	0		1.66s	7,998	272	1,873

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
Beam 1.0 501B A23B	3.6	7.2	22.2%	1		20.70s	1,122	81	53,269

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
Beam 1.0 501B A23B	5.1	3.4	33.3%	1		1.94s	618	115	1,818

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
Beam 1.0 501B A23B	9.8	10.0	100.0%	0		1.27s	924	88	1,648

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
Beam 1.0 501B A23B	8.2	7.2	88.9%	1		4.02s	1,038	270	9,674

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		1.82s	1,533	72	370

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		16.40s	336	39	12,351

तुलना जोडी बदला