Claude Opus 4.8 (low) vs Gemini 3.5 Flash Lite (medium)

Gemini 3.5 Flash Lite (medium) average score मध्ये पुढे आहे: 7.3 vs 7.2. Gemini 3.5 Flash Lite (medium) चा benchmark खर्च कमी आहे: $0.440 vs $3.787. Gemini 3.5 Flash Lite (medium) वेगवान आहे: 8.68s vs 17.13s, pass rates 78.3% vs 76.8%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-11-13

तुलना केलेली मॉडेल्स

क्रमांक: #211
एकूण आउटपुट टोकन्स: 69,489
प्रतिसाद वेळ (सरासरी): 17.13s
एकूण खर्च: $3.787

क्रमांक: #205
एकूण आउटपुट टोकन्स: 129,214
प्रतिसाद वेळ (सरासरी): 8.68s
एकूण खर्च: $0.440

शिफारस केलेले मॉडेल Gemini 3.5 Flash Lite (medium)

It has the best score here (7.3), while costing about 8.6x less than Claude Opus 4.8 (low).

तपशीलवार तुलना

मेट्रिक	Claude Opus 4.8 Claude Opus 4.8 low प्रकाशन: 2026-05-28	Gemini 3.5 Flash Lite Gemini 3.5 Flash Lite medium प्रकाशन: 2026-07-21

मेट्रिक	Claude Opus 4.8 Claude Opus 4.8 low प्रकाशन: 2026-05-28	Gemini 3.5 Flash Lite Gemini 3.5 Flash Lite medium प्रकाशन: 2026-07-21
स्कोअर	7.2	7.3
क्रमांक	#211	#205
विश्वसनीयता	10.0	10.0
सुसंगतता	8.6	7.6
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	78.3%	76.8%
अस्थिर चाचण्या	4	7
एकूण रन	69	69
प्रति निकाल खर्च	23.669	3.140
एकूण खर्च	$3.787	$0.440
इनपुट किंमत	$5.000 / 1M	$0.300 / 1M
आउटपुट किंमत	$25.000 / 1M	$2.500 / 1M
कॅश वाचण्याची किंमत	$0.500 / 1M	$0.030 / 1M
कॅश लिहिण्याची किंमत	$6.250 / 1M	$0.084 / 1M
एकूण इनपुट टोकन्स	409,947	388,307
आउटपुट टोकन्स	46,060	10,412
रिझनिंग टोकन्स	23,429	118,802
प्रतिसाद वेळ (सरासरी)	17.13s	8.68s
प्रतिसाद वेळ (कमाल)	127.97s	86.92s
प्रतिसाद वेळ (एकूण)	394.01s	199.65s
पॅरामीटर्स	~5T एकूण (~500B सक्रिय)	~150B एकूण (~10B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#211 Claude Opus 4.8

low

खर्च: $0.031
वेळ: 14.1s
टोकन्स: 1,345 tok

#205 Gemini 3.5 Flash Lite

medium

खर्च: $0.010
वेळ: 17.8s
टोकन्स: 4,000 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Opus 4.8	4.7	3.1	33.3%	1		110.68s	253,425	3,004	14,248
Gemini 3.5 Flash Lite	4.7	3.1	33.3%	1		86.92s	284,391	1,520	31,459

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Opus 4.8	10.0	10.0	100.0%	0		3.30s	834	793	371
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		2.11s	504	150	5,265

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Opus 4.8	6.6	4.6	77.8%	2		7.58s	10,590	3,637	809
Gemini 3.5 Flash Lite	7.9	9.9	66.7%	0		9.96s	8,122	471	28,930

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Opus 4.8	9.9	10.0	100.0%	0		36.87s	119,079	13,586	2,867
Gemini 3.5 Flash Lite	7.3	5.8	83.3%	1		17.87s	79,299	7,303	29,209

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Opus 4.8	6.3	5.8	66.7%	1		2.27s	10,503	310	0
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		2.11s	7,362	287	2,226

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Opus 4.8	5.3	10.0	33.3%	0		46.54s	972	23,226	4,472
Gemini 3.5 Flash Lite	4.1	4.4	44.5%	2		5.34s	656	17	10,964

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Opus 4.8	10.0	10.0	100.0%	0		2.55s	708	231	0
Gemini 3.5 Flash Lite	4.7	3.1	33.3%	1		2.97s	488	100	1,558

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Opus 4.8	9.8	10.0	100.0%	0		2.78s	909	111	221
Gemini 3.5 Flash Lite	9.8	10.0	100.0%	0		1.72s	625	69	2,657

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Opus 4.8	10.0	10.0	100.0%	0		3.01s	894	592	184
Gemini 3.5 Flash Lite	8.2	7.2	88.9%	1		1.82s	570	199	2,988

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Opus 4.8	10.0	10.0	100.0%	0		6.85s	11,775	370	35
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		2.84s	6,132	287	1,277

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Opus 4.8	3.0	10.0	0.0%	0		5.48s	258	200	222
Gemini 3.5 Flash Lite	2.8	1.6	33.3%	1		3.75s	158	9	2,269

तुलना जोडी बदला