নেভিগেশন
Advertise here

Ember-1 (high) vs Step 3.7 Flash (low)

Step 3.7 Flash (low) average score-এ এগিয়ে: 7.1 vs 7.1. Step 3.7 Flash (low)-এর benchmark খরচ কম: $0.390 vs $1.798. Step 3.7 Flash (low) দ্রুত: 17.87s vs 56.77s, pass rates 71.2% vs 63.6%.

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-09-28

তুলনা করা মডেল

র‍্যাঙ্ক
#158
মোট আউটপুট টোকেন
110,125
প্রতিক্রিয়া সময় (গড়)
56.77s
মোট খরচ
$1.798
র‍্যাঙ্ক
#155
মোট আউটপুট টোকেন
320,393
প্রতিক্রিয়া সময় (গড়)
17.87s
মোট খরচ
$0.390
প্রস্তাবিত মডেল Step 3.7 Flash (low)

It has the best score here (7.1), while costing about 4.6x less than Ember-1 (high).

বিস্তারিত তুলনা

মেট্রিক Ember-1 Ember-1 high প্রকাশ: 2026-09-28 Step 3.7 Flash Step 3.7 Flash low প্রকাশ: 2026-05-29
স্কোর 7.1 7.1
র‍্যাঙ্ক #158 #155
নির্ভরযোগ্যতা 8.0 10.0
ধারাবাহিকতা 7.3 8.1
প্রচেষ্টা 66/66 66/66
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 71.2% 63.6%
অস্থির টেস্ট 7 5
মোট রান 66 66
প্রতি ফলাফলে খরচ 14.981 3.539
মোট খরচ $1.798 $0.390
ইনপুট মূল্য $3.000 / 1M $0.200 / 1M
আউটপুট মূল্য $15.000 / 1M $1.150 / 1M
মোট ইনপুট টোকেন 48,577 103,842
আউটপুট টোকেন 7,345 320,393
রিজনিং টোকেন 102,780 0
প্রতিক্রিয়া সময় (গড়) 56.77s 17.87s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 255.06s 124.75s
প্রতিক্রিয়া সময় (মোট) 1248.88s 393.04s
প্যারামিটার ~2.8T মোট (~104B সক্রিয়) 198B মোট (11B সক্রিয়)
উপলভ্যতা বন্ধ উৎস উন্মুক্ত উৎস

মডেল জেনারেশন শোকেস

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#158 Ember-1

high
খরচ
$0.038
সময়
55.1s
টোকেন
2,671 tok

#155 Step 3.7 Flash

low
অবৈধ SVG
খরচ
$0.004
সময়
25.3s
টোকেন
3,072 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
Ember-1 8.2 7.2 88.9% 1 72.23s 7,144 1,281 23,093
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

দ্রুত তুলনা

তুলনার জুটি বদলান