নেভিগেশন
Advertise here

Ember-1 (high) vs Grok 4.20 (medium)

Ember-1 (high) average score-এ এগিয়ে: 7.1 vs 7.0. Grok 4.20 (medium)-এর benchmark খরচ কম: $0.805 vs $1.798. Grok 4.20 (medium) দ্রুত: 32.56s vs 56.77s, pass rates 71.2% vs 60.6%.

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-09-28

তুলনা করা মডেল

র‍্যাঙ্ক
#158
মোট আউটপুট টোকেন
110,125
প্রতিক্রিয়া সময় (গড়)
56.77s
মোট খরচ
$1.798
র‍্যাঙ্ক
#167
মোট আউটপুট টোকেন
270,259
প্রতিক্রিয়া সময় (গড়)
32.56s
মোট খরচ
$0.805
প্রস্তাবিত মডেল Grok 4.20 (medium)

Its score stays close to the best score here (7.0 vs 7.1), while costing about 2.2x less than Ember-1 (high).

বিস্তারিত তুলনা

মেট্রিক Ember-1 Ember-1 high প্রকাশ: 2026-09-28 Grok 4.20 Grok 4.20 medium প্রকাশ: 2026-03-31
স্কোর 7.1 7.0
র‍্যাঙ্ক #158 #167
নির্ভরযোগ্যতা 8.0 10.0
ধারাবাহিকতা 7.3 8.2
প্রচেষ্টা 66/66 66/66
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 71.2% 60.6%
অস্থির টেস্ট 7 5
মোট রান 66 66
প্রতি ফলাফলে খরচ 14.981 10.365
মোট খরচ $1.798 $0.805
ইনপুট মূল্য $3.000 / 1M $1.250 / 1M
আউটপুট মূল্য $15.000 / 1M $2.500 / 1M
মোট ইনপুট টোকেন 48,577 102,986
আউটপুট টোকেন 7,345 5,860
রিজনিং টোকেন 102,780 264,399
প্রতিক্রিয়া সময় (গড়) 56.77s 32.56s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 255.06s 199.66s
প্রতিক্রিয়া সময় (মোট) 1248.88s 716.36s
প্যারামিটার ~2.8T মোট (~104B সক্রিয়) ~1T মোট (~100B সক্রিয়)
উপলভ্যতা বন্ধ উৎস বন্ধ উৎস

মডেল জেনারেশন শোকেস

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#158 Ember-1

high
খরচ
$0.038
সময়
55.1s
টোকেন
2,671 tok

#167 SpaceXAI: Grok 4.20

medium
খরচ
$0.041
সময়
110.3s
টোকেন
16,336 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
Ember-1 8.2 7.2 88.9% 1 72.23s 7,144 1,281 23,093
Grok 4.20 6.3 6.6 55.6% 1 109.93s 8,307 268 103,150

দ্রুত তুলনা

তুলনার জুটি বদলান