नेव्हिगेशन
Advertise here

Ember-1 (max) vs Grok Build 0.1 (medium)

average score जवळपास समान आहे: 6.7 vs 6.7. Grok Build 0.1 (medium) चा benchmark खर्च कमी आहे: $1.419 vs $3.264. Grok Build 0.1 (medium) वेगवान आहे: 55.13s vs 97.34s, pass rates 59.4% vs 58.0%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-01

तुलना केलेली मॉडेल्स

क्रमांक
#181
एकूण आउटपुट टोकन्स
186,901
प्रतिसाद वेळ (सरासरी)
97.34s
एकूण खर्च
$3.264
क्रमांक
#176
एकूण आउटपुट टोकन्स
529,806
प्रतिसाद वेळ (सरासरी)
55.13s
एकूण खर्च
$1.419
शिफारस केलेले मॉडेल Grok Build 0.1 (medium)

It has the best score here (6.7), while costing about 2.3x less than Ember-1 (max).

तपशीलवार तुलना

मेट्रिक Ember-1 Ember-1 max प्रकाशन: 2026-09-28 Grok Build 0.1 Grok Build 0.1 medium प्रकाशन: 2026-05-21
स्कोअर 6.7 6.7
क्रमांक #181 #176
विश्वसनीयता 8.3 10.0
सुसंगतता 7.8 9.6
प्रयत्न 69/69 69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर 59.4% 58.0%
अस्थिर चाचण्या 6 1
एकूण रन 69 69
प्रति निकाल खर्च 29.671 10.910
एकूण खर्च $3.264 $1.419
इनपुट किंमत $3.000 / 1M $1.000 / 1M
आउटपुट किंमत $15.000 / 1M $2.000 / 1M
एकूण इनपुट टोकन्स 153,399 358,616
आउटपुट टोकन्स 7,803 9,651
रिझनिंग टोकन्स 179,098 520,155
प्रतिसाद वेळ (सरासरी) 97.34s 55.13s
प्रतिसाद वेळ (कमाल) 587.08s 252.69s
प्रतिसाद वेळ (एकूण) 2238.73s 1268.10s
पॅरामीटर्स ~2.8T एकूण (~104B सक्रिय) ~300B एकूण (~30B सक्रिय)
उपलब्धता बंद स्रोत बंद स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#181 Ember-1

max
खर्च
$0.163
वेळ
229.4s
टोकन्स
11,002 tok

#176 SpaceXAI: Grok Build 0.1

medium
खर्च
$0.028
वेळ
81.3s
टोकन्स
14,009 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Ember-1 5.2 4.4 55.6% 2 105.09s 3,362 1,149 27,957
Grok Build 0.1 5.7 9.7 33.3% 0 108.46s 8,304 1,138 161,452

झटपट तुलना

तुलना जोडी बदला