Claude Haiku 5.5 (xhigh) vs Gemini 4 Carbon (medium)

Gemini 4 Carbon (medium) average score मध्ये पुढे आहे: 9.2 vs 9.1. Claude Haiku 5.5 (xhigh) चा benchmark खर्च कमी आहे: $0.140 vs $1.933. Claude Haiku 5.5 (xhigh) वेगवान आहे: 16.58s vs 38.78s, pass rates 81.2% vs 95.7%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-11-13

तुलना केलेली मॉडेल्स

क्रमांक: #51
एकूण आउटपुट टोकन्स: 199,268
प्रतिसाद वेळ (सरासरी): 16.58s
एकूण खर्च: $0.140

क्रमांक: #43
एकूण आउटपुट टोकन्स: 131,948
प्रतिसाद वेळ (सरासरी): 38.78s
एकूण खर्च: $1.933

शिफारस केलेले मॉडेल Claude Haiku 5.5 (xhigh)

Its score stays close to the best score here (9.1 vs 9.2), while costing about 13.9x less than Gemini 4 Carbon (medium).

तपशीलवार तुलना

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 xhigh प्रकाशन: 2026-10-07	Gemini 4 Carbon Gemini 4 Carbon medium प्रकाशन: 2026-11-12

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 xhigh प्रकाशन: 2026-10-07	Gemini 4 Carbon Gemini 4 Carbon medium प्रकाशन: 2026-11-12
स्कोअर	9.1	9.2
क्रमांक	#51	#43
विश्वसनीयता	10.0	8.6
सुसंगतता	9.3	8.9
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	81.2%	95.7%
अस्थिर चाचण्या	2	3
एकूण रन	69	69
प्रति निकाल खर्च	0.773	9.662
एकूण खर्च	$0.140	$1.933
इनपुट किंमत	$0.100 / 1M	$2.000 / 1M
आउटपुट किंमत	$0.500 / 1M	$10.000 / 1M
कॅश वाचण्याची किंमत	$0.010 / 1M	$0.100 / 1M
कॅश लिहिण्याची किंमत	$0.125 / 1M	$0.188 / 1M
एकूण इनपुट टोकन्स	394,509	306,396
आउटपुट टोकन्स	10,349	5,746
रिझनिंग टोकन्स	188,919	126,202
प्रतिसाद वेळ (सरासरी)	16.58s	38.78s
प्रतिसाद वेळ (कमाल)	92.74s	206.61s
प्रतिसाद वेळ (एकूण)	381.40s	892.02s
पॅरामीटर्स	~50B	~1.2T एकूण (~20B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#51 Claude Haiku 5.5

xhigh

खर्च: $0.021
वेळ: 189.0s
टोकन्स: 41,343 tok

#43 Gemini 4 Carbon

medium

खर्च: $0.203
वेळ: 336.6s
टोकन्स: 20,353 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		62.72s	257,002	2,786	14,500
Gemini 4 Carbon	10.0	10.0	100.0%	0		155.77s	187,693	1,085	21,533

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		2.88s	858	367	3,017
Gemini 4 Carbon	10.0	10.0	100.0%	0		6.33s	918	173	1,589

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		13.13s	10,608	504	26,396
Gemini 4 Carbon	10.0	10.0	100.0%	0		29.67s	8,448	487	17,950

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		38.95s	99,968	4,903	45,341
Gemini 4 Carbon	4.7	1.6	66.7%	2		139.49s	87,073	2,878	36,513

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.65s	10,515	312	2,656
Gemini 4 Carbon	10.0	10.0	100.0%	0		6.42s	8,025	338	998

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.3	7.2	44.4%	1		47.83s	990	65	83,800
Gemini 4 Carbon	8.2	7.2	88.9%	1		82.49s	963	48	40,275

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.0	10.0	0.0%	0		9.80s	714	155	4,341
Gemini 4 Carbon	10.0	10.0	100.0%	0		11.27s	591	110	1,164

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.34s	921	100	1,775
Gemini 4 Carbon	10.0	10.0	100.0%	0		4.80s	825	96	414

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	7.6	7.2	77.8%	1		3.80s	912	563	4,066
Gemini 4 Carbon	10.0	10.0	100.0%	0		8.73s	882	216	1,842

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		6.42s	11,757	354	1,285
Gemini 4 Carbon	10.0	10.0	100.0%	0		25.10s	10,717	291	2,769

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	3.0	10.0	0.0%	0		4.79s	264	240	1,742
Gemini 4 Carbon	10.0	10.0	100.0%	0		10.47s	261	24	1,155

तुलना जोडी बदला