Gemini 3.5 Flash Lite (low) vs Mercury 2 (medium)

Mercury 2 (medium) average score मध्ये पुढे आहे: 6.6 vs 6.3. Mercury 2 (medium) चा benchmark खर्च कमी आहे: $0.121 vs $0.183. Mercury 2 (medium) वेगवान आहे: 4.40s vs 4.79s, pass rates 66.7% vs 53.6%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-19

तुलना केलेली मॉडेल्स

क्रमांक: #254
एकूण आउटपुट टोकन्स: 39,912
प्रतिसाद वेळ (सरासरी): 4.79s
एकूण खर्च: $0.183

क्रमांक: #223
एकूण आउटपुट टोकन्स: 96,943
प्रतिसाद वेळ (सरासरी): 4.40s
एकूण खर्च: $0.121

शिफारस केलेले मॉडेल Mercury 2 (medium)

It has the best score here (6.6), while costing about 1.5x less than Gemini 3.5 Flash Lite (low).

तपशीलवार तुलना

मेट्रिक	Gemini 3.5 Flash Lite Gemini 3.5 Flash Lite low प्रकाशन: 2026-07-21	Mercury 2 Mercury 2 medium प्रकाशन: 2026-02-24

मेट्रिक	Gemini 3.5 Flash Lite Gemini 3.5 Flash Lite low प्रकाशन: 2026-07-21	Mercury 2 Mercury 2 medium प्रकाशन: 2026-02-24
स्कोअर	6.3	6.6
क्रमांक	#254	#223
विश्वसनीयता	10.0	10.0
सुसंगतता	7.9	8.1
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	66.7%	53.6%
अस्थिर चाचण्या	6	5
एकूण रन	69	69
प्रति निकाल खर्च	1.521	1.201
एकूण खर्च	$0.183	$0.121
इनपुट किंमत	$0.300 / 1M	$0.250 / 1M
आउटपुट किंमत	$2.500 / 1M	$0.750 / 1M
कॅश वाचण्याची किंमत	$0.030 / 1M	$0.025 / 1M
कॅश लिहिण्याची किंमत	$0.084 / 1M	लागू नाही
एकूण इनपुट टोकन्स	275,779	189,300
आउटपुट टोकन्स	14,401	10,854
रिझनिंग टोकन्स	25,511	86,089
प्रतिसाद वेळ (सरासरी)	4.79s	4.40s
प्रतिसाद वेळ (कमाल)	53.91s	34.92s
प्रतिसाद वेळ (एकूण)	110.24s	96.81s
पॅरामीटर्स	~150B एकूण (~10B सक्रिय)	~100B
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#254 Gemini 3.5 Flash Lite

low

खर्च: $0.007
वेळ: 7.5s
टोकन्स: 2,669 tok

#223 Mercury 2

medium

खर्च: $0.002
वेळ: 2.1s
टोकन्स: 1,702 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash Lite	5.0	10.0	0.0%	0		53.91s	136,614	1,502	0
Mercury 2	4.7	1.6	66.7%	1		34.92s	78,785	529	8,860

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash Lite	9.0	8.3	91.7%	1		1.69s	506	351	4,032
Mercury 2	6.9	9.9	50.0%	0		1.12s	554	2,546	2,609

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash Lite	4.3	10.0	0.0%	0		917ms	8,126	464	0
Mercury 2	8.2	7.7	77.8%	1		2.04s	7,065	296	11,328

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash Lite	3.8	1.6	50.0%	2		11.00s	114,540	11,142	9,298
Mercury 2	6.7	9.1	50.0%	0		7.84s	87,365	6,533	20,474

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		859ms	7,364	287	0
Mercury 2	7.3	5.9	83.3%	1		1.11s	6,234	183	1,656

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash Lite	5.9	7.2	55.6%	1		3.55s	658	18	6,902
Mercury 2	2.9	4.4	22.2%	2		8.06s	1,638	53	31,177

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		2.34s	488	97	1,049
Mercury 2	4.8	10.0	0.0%	0		821ms	456	137	542

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash Lite	9.8	10.0	100.0%	0		1.75s	621	70	1,872
Mercury 2	10.0	10.0	100.0%	0		1.07s	340	14	958

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash Lite	7.6	7.2	77.8%	1		1.19s	572	168	1,494
Mercury 2	5.4	10.0	33.3%	0		949ms	601	361	2,781

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		1.39s	6,132	293	0
Mercury 2	10.0	10.0	100.0%	0		1.89s	6,080	180	1,956

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Gemini 3.5 Flash Lite	4.7	1.6	66.7%	1		1.65s	158	9	864
Mercury 2	3.0	10.0	0.0%	0		2.58s	182	22	3,748

तुलना जोडी बदला