নেভিগেশন
Advertise here

Ember-1 vs Step 3.5 Flash (medium)

average score প্রায় সমান: 5.4 vs 5.4. Step 3.5 Flash (medium)-এর benchmark খরচ কম: $0.105 vs $0.786. Ember-1 দ্রুত: 22.65s vs 190.48s, pass rates 43.5% vs 49.3%.

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-10-01

তুলনা করা মডেল

র‍্যাঙ্ক
#277
মোট আউটপুট টোকেন
11,832
প্রতিক্রিয়া সময় (গড়)
22.65s
মোট খরচ
$0.786
র‍্যাঙ্ক
#276
মোট আউটপুট টোকেন
607,130
প্রতিক্রিয়া সময় (গড়)
190.48s
মোট খরচ
$0.105
প্রস্তাবিত মডেল Step 3.5 Flash (medium)

It has the best score here (5.4), while costing about 7.5x less than Ember-1.

বিস্তারিত তুলনা

মেট্রিক Ember-1 Ember-1 none প্রকাশ: 2026-09-28 Step 3.5 Flash Step 3.5 Flash medium প্রকাশ: 2026-02-01
স্কোর 5.4 5.4
র‍্যাঙ্ক #277 #276
নির্ভরযোগ্যতা 8.8 10.0
ধারাবাহিকতা 8.6 8.3
প্রচেষ্টা 69/69 66/69
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 43.5% 49.3%
অস্থির টেস্ট 4 3
মোট রান 69 66
প্রতি ফলাফলে খরচ 9.817 1.047
মোট খরচ $0.786 $0.105
ইনপুট মূল্য $3.000 / 1M $0.100 / 1M
আউটপুট মূল্য $15.000 / 1M $0.300 / 1M
মোট ইনপুট টোকেন 202,617 139,086
আউটপুট টোকেন 11,832 193,584
রিজনিং টোকেন 0 413,546
প্রতিক্রিয়া সময় (গড়) 22.65s 190.48s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 93.12s 1597.85s
প্রতিক্রিয়া সময় (মোট) 520.91s 3238.23s
প্যারামিটার ~2.8T মোট (~104B সক্রিয়) 196B মোট (11B সক্রিয়)
উপলভ্যতা বন্ধ উৎস উন্মুক্ত উৎস

মডেল জেনারেশন শোকেস

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#277 Ember-1

none
খরচ
$0.156
সময়
224.6s
টোকেন
10,555 tok

#276 Step 3.5 Flash

medium
খরচ
$0.008
সময়
277.1s
টোকেন
23,695 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
Ember-1 5.5 10.0 33.3% 0 1.94s 7,485 393 0
Step 3.5 Flash 2.4 5.2 0.0% 0 258.38s 2,211 13,207 22,429

দ্রুত তুলনা

তুলনার জুটি বদলান

Step 3.5 FlashmediumvsMiMo-V2.6-FlashnoneStep 3.5 FlashmediumvsHy4 previewlowEmber-1nonevsHy4 previewlowNorth Mini Codemediumবিনামূল্যে উপলভ্যvsEmber-1noneGPT-5.6 LunanonevsStep 3.5 FlashmediumEmber-1nonevsGranite 4.2 8BlowGranite 4.2 8BlowvsStep 3.5 FlashmediumKimi K2.5nonevsStep 3.5 FlashmediumQwen3.8 27Bnoneবিনামূল্যে উপলভ্যvsStep 3.5 FlashmediumSeed-2.0-CodenonevsStep 3.5 FlashmediumLaguna XS 2.1noneবিনামূল্যে উপলভ্যvsStep 3.5 FlashmediumQwen3.6 35B A3BnonevsStep 3.5 Flashmedium