Ember-1 (low) vs Gemini 3.1 Flash Lite (medium)

Ember-1 (low) average score मध्ये पुढे आहे: 7.0 vs 6.9. Gemini 3.1 Flash Lite (medium) चा benchmark खर्च कमी आहे: $0.153 vs $1.488. Gemini 3.1 Flash Lite (medium) वेगवान आहे: 6.27s vs 34.90s, pass rates 65.2% vs 59.4%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-01

तुलना केलेली मॉडेल्स

क्रमांक: #157
एकूण आउटपुट टोकन्स: 56,766
प्रतिसाद वेळ (सरासरी): 34.90s
एकूण खर्च: $1.488

क्रमांक: #162
एकूण आउटपुट टोकन्स: 63,967
प्रतिसाद वेळ (सरासरी): 6.27s
एकूण खर्च: $0.153

शिफारस केलेले मॉडेल Gemini 3.1 Flash Lite (medium)

Its score stays close to the best score here (6.9 vs 7.0), while costing about 9.7x less than Ember-1 (low).

तपशीलवार तुलना

मेट्रिक	Ember-1 Ember-1 low प्रकाशन: 2026-09-28	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite medium प्रकाशन: 2026-05-08

मेट्रिक	Ember-1 Ember-1 low प्रकाशन: 2026-09-28	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite medium प्रकाशन: 2026-05-08
स्कोअर	7.0	6.9
क्रमांक	#157	#162
विश्वसनीयता	8.8	10.0
सुसंगतता	8.2	9.2
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	65.2%	59.4%
अस्थिर चाचण्या	5	2
एकूण रन	69	69
प्रति निकाल खर्च	11.441	1.177
एकूण खर्च	$1.488	$0.153
इनपुट किंमत	$3.000 / 1M	$0.250 / 1M
आउटपुट किंमत	$15.000 / 1M	$1.500 / 1M
एकूण इनपुट टोकन्स	211,908	228,023
आउटपुट टोकन्स	14,158	10,779
रिझनिंग टोकन्स	42,608	53,188
प्रतिसाद वेळ (सरासरी)	34.90s	6.27s
प्रतिसाद वेळ (कमाल)	121.29s	47.78s
प्रतिसाद वेळ (एकूण)	802.79s	144.10s
पॅरामीटर्स	~2.8T एकूण (~104B सक्रिय)	~150B एकूण (~10B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#157 Ember-1

low

खर्च: $0.016
वेळ: 24.2s
टोकन्स: 1,165 tok

#162 Gemini 3.1 Flash Lite

medium

खर्च: $0.003
वेळ: 5.3s
टोकन्स: 1,754 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	4.7	3.1	33.3%	1		121.29s	178,897	9,378	9,921
Gemini 3.1 Flash Lite	5.0	10.0	0.0%	0		47.78s	123,098	1,611	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	8.2	7.9	83.3%	1		22.18s	1,402	571	613
Gemini 3.1 Flash Lite	9.1	10.0	75.0%	0		2.39s	502	604	4,201

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	10.0	10.0	100.0%	0		37.91s	8,097	2,518	13,142
Gemini 3.1 Flash Lite	5.5	10.0	33.3%	0		3.81s	8,134	459	8,978

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	6.5	10.0	50.0%	0		51.45s	12,828	381	689
Gemini 3.1 Flash Lite	7.2	9.1	50.0%	0		18.55s	80,983	7,241	20,231

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	7.3	5.9	83.3%	1		34.82s	6,076	223	778
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		2.60s	7,362	279	2,845

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	2.9	7.2	11.1%	1		56.17s	1,154	234	12,476
Gemini 3.1 Flash Lite	2.9	7.2	11.1%	1		3.93s	650	15	7,223

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	10.0	10.0	100.0%	0		5.67s	744	139	462
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		2.60s	488	84	1,142

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	6.2	5.8	66.7%	1		32.73s	781	121	466
Gemini 3.1 Flash Lite	9.9	10.0	100.0%	0		2.59s	623	75	3,320

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	10.0	10.0	100.0%	0		3.27s	1,452	393	595
Gemini 3.1 Flash Lite	7.6	7.2	77.8%	1		1.95s	568	165	2,450

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	3.0	10.0	0.0%	0		26.43s	0	0	0
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		4.55s	5,457	234	921

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	3.0	10.0	0.0%	0		30.60s	477	200	3,466
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		3.08s	158	12	1,877

झटपट तुलना

तुलना जोडी बदला

Ember-1highvsGemini 3.1 Flash Litemedium Ember-1lowvsKimi K2.7 Codemedium Ember-1lowvsGemini 3.1 Flash Lite Previewmedium Gemini 3.1 Flash LitemediumvsGPT-5.6 Lunalow Ember-1lowvsQwen3.5-122B-A10Bmedium Claude Sonnet 5.5lowvsGemini 3.1 Flash Litemedium Claude Opus 4.8nonevsGemini 3.1 Flash Litemedium Ember-1lowvsGPT-5.2 Chatnone Gemini 3.1 Flash LitemediumvsMuse Glimmer 30Blow Gemini 3.1 Flash LitemediumvsGrok 4.6low Gemini 3.1 Flash LitemediumvsInklinglowमोफत उपलब्ध Ember-1lowvsMiMo-V2.5medium