Claude Sonnet 5.5 (medium) vs Gemini 3.7 Flash (low)

Gemini 3.7 Flash (low) average score मध्ये पुढे आहे: 9.4 vs 6.5. Gemini 3.7 Flash (low) चा benchmark खर्च कमी आहे: $0.183 vs $1.100. Gemini 3.7 Flash (low) वेगवान आहे: 6.24s vs 8.03s, pass rates 40.6% vs 95.7%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-19

तुलना केलेली मॉडेल्स

क्रमांक: #227
एकूण आउटपुट टोकन्स: 37,748
प्रतिसाद वेळ (सरासरी): 8.03s
एकूण खर्च: $1.100

क्रमांक: #26
एकूण आउटपुट टोकन्स: 38,453
प्रतिसाद वेळ (सरासरी): 6.24s
एकूण खर्च: $0.183

शिफारस केलेले मॉडेल Gemini 3.7 Flash (low)

It has the best score here (9.4), while costing about 6.0x less than Claude Sonnet 5.5 (medium).

तपशीलवार तुलना

मेट्रिक	Claude Sonnet 5.5 Claude Sonnet 5.5 medium प्रकाशन: 2026-09-29	Gemini 3.7 Flash Gemini 3.7 Flash low प्रकाशन: 2026-08-14

मेट्रिक	Claude Sonnet 5.5 Claude Sonnet 5.5 medium प्रकाशन: 2026-09-29	Gemini 3.7 Flash Gemini 3.7 Flash low प्रकाशन: 2026-08-14
स्कोअर	6.5	9.4
क्रमांक	#227	#26
विश्वसनीयता	10.0	10.0
सुसंगतता	9.7	9.3
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	40.6%	95.7%
अस्थिर चाचण्या	1	2
एकूण रन	69	69
प्रति निकाल खर्च	12.221	0.868
एकूण खर्च	$1.100	$0.183
इनपुट किंमत	$2.000 / 1M	$0.750 / 1M
आउटपुट किंमत	$10.000 / 1M	$3.750 / 1M
कॅश वाचण्याची किंमत	$0.200 / 1M	$0.075 / 1M
कॅश लिहिण्याची किंमत	$2.500 / 1M	$0.042 / 1M
एकूण इनपुट टोकन्स	361,183	188,519
आउटपुट टोकन्स	26,609	7,694
रिझनिंग टोकन्स	11,139	30,759
प्रतिसाद वेळ (सरासरी)	8.03s	6.24s
प्रतिसाद वेळ (कमाल)	51.18s	58.75s
प्रतिसाद वेळ (एकूण)	184.80s	143.56s
पॅरामीटर्स	~1T एकूण (~100B सक्रिय)	~500B एकूण (~20B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#227 Claude Sonnet 5.5

medium

खर्च: $0.024
वेळ: 17.4s
टोकन्स: 2,525 tok

#26 Gemini 3.7 Flash

low

खर्च: $0.010
वेळ: 23.5s
टोकन्स: 5,210 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 5.5	10.0	10.0	100.0%	0		51.18s	190,412	3,424	1,344
Gemini 3.7 Flash	10.0	10.0	100.0%	0		58.75s	98,197	1,400	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 5.5	6.5	10.0	50.0%	0		2.54s	858	1,697	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.54s	492	99	1,398

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 5.5	3.4	9.7	0.0%	0		6.07s	10,608	6,767	0
Gemini 3.7 Flash	7.6	7.2	77.8%	1		6.20s	8,118	461	11,508

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 5.5	8.5	10.0	50.0%	0		23.58s	133,232	7,780	5,241
Gemini 3.7 Flash	10.0	10.0	100.0%	0		13.00s	66,250	4,873	8,108

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 5.5	6.5	10.0	50.0%	0		2.56s	10,515	696	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.15s	7,548	278	1,093

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 5.5	3.0	10.0	0.0%	0		8.78s	990	4,137	2,729
Gemini 3.7 Flash	8.2	7.2	88.9%	1		3.09s	642	12	3,029

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 5.5	5.1	3.4	33.3%	1		2.27s	714	324	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.76s	486	81	1,043

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 5.5	6.3	10.0	50.0%	0		1.88s	921	346	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.47s	615	72	1,778

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 5.5	7.7	10.0	66.7%	0		2.43s	912	876	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.92s	558	166	1,580

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 5.5	10.0	10.0	100.0%	0		4.75s	11,757	354	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		4.10s	5,457	241	160

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 5.5	3.0	10.0	0.0%	0		8.57s	264	208	1,825
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.92s	156	11	1,062

तुलना जोडी बदला