Claude Haiku 5.5 (xhigh) vs Gemini 4 Hydrogen (medium)

Gemini 4 Hydrogen (medium) average score मध्ये पुढे आहे: 9.3 vs 9.1. Claude Haiku 5.5 (xhigh) चा benchmark खर्च कमी आहे: $0.140 vs $1.330. Gemini 4 Hydrogen (medium) वेगवान आहे: 16.56s vs 16.58s, pass rates 81.2% vs 91.3%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-11-13

तुलना केलेली मॉडेल्स

क्रमांक: #51
एकूण आउटपुट टोकन्स: 199,268
प्रतिसाद वेळ (सरासरी): 16.58s
एकूण खर्च: $0.140

क्रमांक: #35
एकूण आउटपुट टोकन्स: 127,550
प्रतिसाद वेळ (सरासरी): 16.56s
एकूण खर्च: $1.330

शिफारस केलेले मॉडेल Claude Haiku 5.5 (xhigh)

Its score stays close to the best score here (9.1 vs 9.3), while costing about 9.6x less than Gemini 4 Hydrogen (medium).

तपशीलवार तुलना

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 xhigh प्रकाशन: 2026-10-07	Gemini 4 Hydrogen Gemini 4 Hydrogen medium प्रकाशन: 2026-11-12

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 xhigh प्रकाशन: 2026-10-07	Gemini 4 Hydrogen Gemini 4 Hydrogen medium प्रकाशन: 2026-11-12
स्कोअर	9.1	9.3
क्रमांक	#51	#35
विश्वसनीयता	10.0	8.9
सुसंगतता	9.3	8.9
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	81.2%	91.3%
अस्थिर चाचण्या	2	3
एकूण रन	69	69
प्रति निकाल खर्च	0.773	6.648
एकूण खर्च	$0.140	$1.330
इनपुट किंमत	$0.100 / 1M	$1.500 / 1M
आउटपुट किंमत	$0.500 / 1M	$7.500 / 1M
कॅश वाचण्याची किंमत	$0.010 / 1M	$0.075 / 1M
कॅश लिहिण्याची किंमत	$0.125 / 1M	$0.084 / 1M
एकूण इनपुट टोकन्स	394,509	248,530
आउटपुट टोकन्स	10,349	6,957
रिझनिंग टोकन्स	188,919	120,593
प्रतिसाद वेळ (सरासरी)	16.58s	16.56s
प्रतिसाद वेळ (कमाल)	92.74s	70.41s
प्रतिसाद वेळ (एकूण)	381.40s	380.96s
पॅरामीटर्स	~50B	~300B एकूण (~15B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#51 Claude Haiku 5.5

xhigh

खर्च: $0.021
वेळ: 189.0s
टोकन्स: 41,343 tok

#35 Gemini 4 Hydrogen

medium

खर्च: $0.059
वेळ: 48.1s
टोकन्स: 7,929 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		62.72s	257,002	2,786	14,500
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		70.41s	157,556	1,099	12,737

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		2.88s	858	367	3,017
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		2.99s	918	148	2,478

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		13.13s	10,608	504	26,396
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		19.06s	8,448	489	21,603

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		38.95s	99,968	4,903	45,341
Gemini 4 Hydrogen	6.4	5.8	66.7%	1		30.98s	60,405	4,005	16,609

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.65s	10,515	312	2,656
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		7.05s	8,025	336	3,746

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.3	7.2	44.4%	1		47.83s	990	65	83,800
Gemini 4 Hydrogen	5.2	4.4	55.6%	2		40.99s	963	49	53,450

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.0	10.0	0.0%	0		9.80s	714	155	4,341
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		5.70s	591	131	1,341

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.34s	921	100	1,775
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		4.75s	825	96	2,311

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.6	7.2	77.8%	1		3.80s	912	563	4,066
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		3.43s	882	244	2,210

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		6.42s	11,757	354	1,285
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		10.35s	9,656	336	2,320

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	3.0	10.0	0.0%	0		4.79s	264	240	1,742
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		6.54s	261	24	1,788

तुलना जोडी बदला