Gemini 3.5 Flash (minimal) vs Mercury 2 (medium)

Mercury 2 (medium) average score मध्ये पुढे आहे: 6.6 vs 6.4. Mercury 2 (medium) चा benchmark खर्च कमी आहे: $0.121 vs $0.508. Mercury 2 (medium) वेगवान आहे: 4.40s vs 4.67s, pass rates 58.0% vs 53.6%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-02

तुलना केलेली मॉडेल्स

क्रमांक: #208
एकूण आउटपुट टोकन्स: 18,040
प्रतिसाद वेळ (सरासरी): 4.67s
एकूण खर्च: $0.508

क्रमांक: #190
एकूण आउटपुट टोकन्स: 96,943
प्रतिसाद वेळ (सरासरी): 4.40s
एकूण खर्च: $0.121

शिफारस केलेले मॉडेल Mercury 2 (medium)

It has the best score here (6.6), while costing about 4.2x less than Gemini 3.5 Flash (minimal).

तपशीलवार तुलना

मेट्रिक	Gemini 3.5 Flash Gemini 3.5 Flash minimal प्रकाशन: 2026-05-19	Mercury 2 Mercury 2 medium प्रकाशन: 2026-02-24

मेट्रिक	Gemini 3.5 Flash Gemini 3.5 Flash minimal प्रकाशन: 2026-05-19	Mercury 2 Mercury 2 medium प्रकाशन: 2026-02-24
स्कोअर	6.4	6.6
क्रमांक	#208	#190
विश्वसनीयता	10.0	10.0
सुसंगतता	9.6	8.1
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	58.0%	53.6%
अस्थिर चाचण्या	1	5
एकूण रन	69	69
प्रति निकाल खर्च	3.903	1.201
एकूण खर्च	$0.508	$0.121
इनपुट किंमत	$1.500 / 1M	$0.250 / 1M
आउटपुट किंमत	$9.000 / 1M	$0.750 / 1M
कॅश वाचण्याची किंमत	$0.150 / 1M	$0.025 / 1M
कॅश लिहिण्याची किंमत	$0.084 / 1M	लागू नाही
एकूण इनपुट टोकन्स	230,004	189,300
आउटपुट टोकन्स	18,040	10,854
रिझनिंग टोकन्स	0	86,089
प्रतिसाद वेळ (सरासरी)	4.67s	4.40s
प्रतिसाद वेळ (कमाल)	49.23s	34.92s
प्रतिसाद वेळ (एकूण)	107.45s	96.81s
पॅरामीटर्स	~500B एकूण (~20B सक्रिय)	~100B
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#208 Gemini 3.5 Flash

minimal

खर्च: $0.041
वेळ: 20.4s
टोकन्स: 4,608 tok

#190 Mercury 2

medium

खर्च: $0.002
वेळ: 2.1s
टोकन्स: 1,702 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	5.0	10.0	0.0%	0		49.23s	129,242	1,586	0
Mercury 2	4.7	1.6	66.7%	1		34.92s	78,785	529	8,860

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	6.5	10.0	50.0%	0		892ms	492	405	0
Mercury 2	6.9	9.9	50.0%	0		1.12s	554	2,546	2,609

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	5.6	9.9	33.3%	0		2.75s	8,122	3,456	0
Mercury 2	8.2	7.7	77.8%	1		2.04s	7,065	296	11,328

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	3.0	10.0	0.0%	0		14.41s	76,686	11,581	0
Mercury 2	6.7	9.1	50.0%	0		7.84s	87,365	6,533	20,474

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.66s	7,548	279	0
Mercury 2	7.3	5.9	83.3%	1		1.11s	6,234	183	1,656

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	7.7	10.0	66.7%	0		879ms	642	12	0
Mercury 2	2.9	4.4	22.2%	2		8.06s	1,638	53	31,177

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	10.0	10.0	100.0%	0		922ms	486	117	0
Mercury 2	4.8	10.0	0.0%	0		821ms	456	137	542

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	6.4	5.8	66.7%	1		893ms	615	76	0
Mercury 2	10.0	10.0	100.0%	0		1.07s	340	14	958

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.45s	558	282	0
Mercury 2	5.4	10.0	33.3%	0		949ms	601	361	2,781

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.79s	5,457	234	0
Mercury 2	10.0	10.0	100.0%	0		1.89s	6,080	180	1,956

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash	3.0	10.0	0.0%	0		1.76s	156	12	0
Mercury 2	3.0	10.0	0.0%	0		2.58s	182	22	3,748

झटपट तुलना

तुलना जोडी बदला