Claude Haiku 5.5 (max) vs Gemini 3.7 Flash (low)

Gemini 3.7 Flash (low) average score मध्ये पुढे आहे: 9.4 vs 8.5. Gemini 3.7 Flash (low) चा benchmark खर्च कमी आहे: $0.183 vs $0.509. Gemini 3.7 Flash (low) वेगवान आहे: 6.24s vs 61.71s, pass rates 85.5% vs 95.7%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-07

तुलना केलेली मॉडेल्स

क्रमांक: #70
एकूण आउटपुट टोकन्स: 919,699
प्रतिसाद वेळ (सरासरी): 61.71s
एकूण खर्च: $0.509

क्रमांक: #25
एकूण आउटपुट टोकन्स: 38,453
प्रतिसाद वेळ (सरासरी): 6.24s
एकूण खर्च: $0.183

शिफारस केलेले मॉडेल Gemini 3.7 Flash (low)

It has the best score here (9.4), while costing about 2.8x less than Claude Haiku 5.5 (max).

तपशीलवार तुलना

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 max प्रकाशन: 2026-10-07	Gemini 3.7 Flash Gemini 3.7 Flash low प्रकाशन: 2026-08-14

मेट्रिक	Claude Haiku 5.5 Claude Haiku 5.5 max प्रकाशन: 2026-10-07	Gemini 3.7 Flash Gemini 3.7 Flash low प्रकाशन: 2026-08-14
स्कोअर	8.5	9.4
क्रमांक	#70	#25
विश्वसनीयता	10.0	10.0
सुसंगतता	9.6	9.3
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	85.5%	95.7%
अस्थिर चाचण्या	1	2
एकूण रन	69	69
प्रति निकाल खर्च	2.677	0.868
एकूण खर्च	$0.509	$0.183
इनपुट किंमत	$0.100 / 1M	$0.750 / 1M
आउटपुट किंमत	$0.500 / 1M	$3.750 / 1M
कॅश वाचण्याची किंमत	$0.010 / 1M	$0.075 / 1M
कॅश लिहिण्याची किंमत	$0.125 / 1M	$0.042 / 1M
एकूण इनपुट टोकन्स	487,516	188,519
आउटपुट टोकन्स	10,212	7,694
रिझनिंग टोकन्स	909,487	30,759
प्रतिसाद वेळ (सरासरी)	61.71s	6.24s
प्रतिसाद वेळ (कमाल)	288.94s	58.75s
प्रतिसाद वेळ (एकूण)	1419.40s	143.56s
पॅरामीटर्स	~50B	~500B एकूण (~20B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#70 Claude Haiku 5.5

max

OpenRouter returned no showcase content (finish_reason: error).

खर्च: $0.000
वेळ: 164.5s
टोकन्स: 0 tok

#25 Gemini 3.7 Flash

low

खर्च: $0.010
वेळ: 23.5s
टोकन्स: 5,210 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	4.7	1.6	66.7%	1		93.30s	349,997	2,345	42,315
Gemini 3.7 Flash	10.0	10.0	100.0%	0		58.75s	98,197	1,400	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		5.52s	858	401	10,159
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.54s	492	99	1,398

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		55.87s	10,608	532	125,988
Gemini 3.7 Flash	7.6	7.2	77.8%	1		6.20s	8,118	461	11,508

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		148.38s	99,980	4,909	215,518
Gemini 3.7 Flash	10.0	10.0	100.0%	0		13.00s	66,250	4,873	8,108

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		11.11s	10,515	311	13,476
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.15s	7,548	278	1,093

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	5.3	10.0	33.3%	0		228.16s	990	18	426,269
Gemini 3.7 Flash	8.2	7.2	88.9%	1		3.09s	642	12	3,029

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		42.22s	714	250	26,083
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.76s	486	81	1,043

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		6.22s	921	99	5,965
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.47s	615	72	1,778

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		16.54s	912	716	29,419
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.92s	558	166	1,580

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	10.0	10.0	100.0%	0		9.86s	11,757	355	3,989
Gemini 3.7 Flash	10.0	10.0	100.0%	0		4.10s	5,457	241	160

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Haiku 5.5	3.0	10.0	0.0%	0		18.80s	264	276	10,306
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.92s	156	11	1,062

तुलना जोडी बदला