Ember-1 (high) vs Gemini 3 Flash Preview (low)

Gemini 3 Flash Preview (low) average score मध्ये पुढे आहे: 6.9 vs 6.9. Gemini 3 Flash Preview (low) चा benchmark खर्च कमी आहे: $0.254 vs $2.405. Gemini 3 Flash Preview (low) वेगवान आहे: 8.51s vs 58.14s, pass rates 71.0% vs 72.5%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-01

तुलना केलेली मॉडेल्स

क्रमांक: #163
एकूण आउटपुट टोकन्स: 121,223
प्रतिसाद वेळ (सरासरी): 58.14s
एकूण खर्च: $2.405

क्रमांक: #160
एकूण आउटपुट टोकन्स: 42,400
प्रतिसाद वेळ (सरासरी): 8.51s
एकूण खर्च: $0.254

शिफारस केलेले मॉडेल Gemini 3 Flash Preview (low)

It has the best score here (6.9), while costing about 9.5x less than Ember-1 (high).

तपशीलवार तुलना

मेट्रिक	Ember-1 Ember-1 high प्रकाशन: 2026-09-28	Gemini 3 Flash Preview Gemini 3 Flash Preview low प्रकाशन: 2025-12-17

मेट्रिक	Ember-1 Ember-1 high प्रकाशन: 2026-09-28	Gemini 3 Flash Preview Gemini 3 Flash Preview low प्रकाशन: 2025-12-17
स्कोअर	6.9	6.9
क्रमांक	#163	#160
विश्वसनीयता	8.6	10.0
सुसंगतता	7.2	9.3
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	71.0%	72.5%
अस्थिर चाचण्या	8	2
एकूण रन	69	69
प्रति निकाल खर्च	20.041	1.582
एकूण खर्च	$2.405	$0.254
इनपुट किंमत	$3.000 / 1M	$0.500 / 1M
आउटपुट किंमत	$15.000 / 1M	$3.000 / 1M
एकूण इनपुट टोकन्स	195,489	251,677
आउटपुट टोकन्स	12,475	11,196
रिझनिंग टोकन्स	108,748	31,204
प्रतिसाद वेळ (सरासरी)	58.14s	8.51s
प्रतिसाद वेळ (कमाल)	255.06s	52.64s
प्रतिसाद वेळ (एकूण)	1337.19s	195.76s
पॅरामीटर्स	~2.8T एकूण (~104B सक्रिय)	~500B एकूण (~20B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#163 Ember-1

high

खर्च: $0.038
वेळ: 55.1s
टोकन्स: 2,671 tok

#160 Gemini 3 Flash Preview

low

खर्च: $0.007
वेळ: 12.1s
टोकन्स: 2,289 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	6.1	3.1	66.7%	1		88.31s	146,912	5,130	5,968
Gemini 3 Flash Preview	5.0	10.0	0.0%	0		52.64s	127,990	1,624	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	8.7	7.9	91.7%	1		24.05s	1,544	886	992
Gemini 3 Flash Preview	10.0	10.0	100.0%	0		3.48s	500	281	3,082

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	8.2	7.2	88.9%	1		72.23s	7,144	1,281	23,093
Gemini 3 Flash Preview	5.8	7.2	44.4%	1		6.00s	8,122	456	7,421

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	6.4	5.8	66.7%	1		79.89s	28,994	1,667	6,614
Gemini 3 Flash Preview	3.0	10.0	0.0%	0		10.20s	99,775	7,822	0

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	7.3	5.9	83.3%	1		36.10s	6,076	230	1,228
Gemini 3 Flash Preview	10.0	10.0	100.0%	0		9.40s	7,261	279	3,656

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	2.9	4.4	22.2%	2		175.49s	1,154	1,023	61,582
Gemini 3 Flash Preview	5.3	7.2	44.4%	1		9.74s	648	12	9,096

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	10.0	10.0	100.0%	0		4.49s	744	194	304
Gemini 3 Flash Preview	10.0	10.0	100.0%	0		3.68s	492	120	981

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	7.1	5.8	83.3%	1		33.38s	992	162	784
Gemini 3 Flash Preview	9.9	10.0	100.0%	0		7.02s	621	71	2,752

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	10.0	10.0	100.0%	0		4.84s	1,452	390	848
Gemini 3 Flash Preview	10.0	10.0	100.0%	0		5.77s	562	288	3,168

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	3.0	10.0	0.0%	0		26.45s	0	0	0
Gemini 3 Flash Preview	10.0	10.0	100.0%	0		4.99s	5,550	234	415

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Ember-1	3.0	10.0	0.0%	0		65.34s	477	1,512	7,335
Gemini 3 Flash Preview	10.0	10.0	100.0%	0		2.75s	156	9	633

झटपट तुलना

तुलना जोडी बदला

Ember-1highvsGemini 3.1 Flash Litemedium Gemini 3 Flash PreviewlowvsQwen3.5-122B-A10Bmedium Ember-1highvsGemma 4 31Bmediumमोफत उपलब्ध Ember-1highvsGPT-5.6 Lunalow Claude Sonnet 5.5lowvsEmber-1high Claude Opus 4.8nonevsEmber-1high Ember-1highvsKimi K2.6medium Gemini 3 Flash PreviewlowvsKimi K2.7 Codemedium Ember-1highvsQwen3.5-Flashmedium Ember-1highvsInklinglowमोफत उपलब्ध Ember-1highvsMercury 2.5 Previewmedium Ember-1highvsMuse Glimmer 30Blow