AI BENCHY
Advertise here
#108

Step 3.5 Flash

Stepfun প্রকাশ: 2026-02-01 পরীক্ষিত হয়েছে: 2026-04-11 01:44 stepfun/step-3.5-flash::none
196B মোট (11B সক্রিয়)MoEউন্মুক্ত উৎস
(medium) (none)

সারাংশ

Step 3.5 Flash AI BENCHY-তে 3.0 স্কোর করে এবং #108 স্থানে আছে। এর reliability প্রযোজ্য নয়, pass rate 0.0%, মোট খরচ $0.000, এবং গড় response time 0ms.

Step 3.5 Flash কে আলাদা করে যা: এই score range-এর জন্য মোট benchmark খরচ অস্বাভাবিকভাবে কম। একই ধরনের মডেলের তুলনায় এটি লক্ষণীয়ভাবে দ্রুত।

আর্কাইভড মডেল: এই মডেল আর আপডেট করা হবে না এবং নতুন টেস্টে পরীক্ষা করা হবে না।

মডেলের তথ্য

গবেষণার তারিখ: 2026-08-12

প্রকাশিত
প্যারামিটার
196B মোট (11B সক্রিয়)
আর্কিটেকচার
MoE
উপলভ্যতা
উন্মুক্ত উৎস
লাইসেন্স
Apache-2.0

ধারাবাহিকতা

10.0

নির্ভরযোগ্যতা

প্রযোজ্য নয়

মোট আউটপুট টোকেন

0

মোট ইনপুট টোকেন

0

ইনপুট মূল্য

$0.100 / 1M

আউটপুট মূল্য

$0.300 / 1M

সঠিক টেস্ট

ভুল টেস্ট: 1

প্রতি চেষ্টায় পাস রেট: 0.0%

অস্থির টেস্ট

0

অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।

প্রতিক্রিয়া সময় (গড়)

0ms

প্রতিক্রিয়া সময় (সর্বোচ্চ): 0ms

প্রতিক্রিয়া সময় (মোট): 0ms

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#108 Step 3.5 Flash

none
খরচ
$0.005
সময়
156.3s
টোকেন
13,887 tok

রান ইতিহাস

পরীক্ষিত হয়েছে স্কোর নির্ভরযোগ্যতা সঠিক টেস্ট মোট খরচ তুলনা করুন
2026-05-08 15:30 নতুন টেস্ট যোগ হয়েছে 2.3 10.0 $0.020 তুলনা করুন
2026-04-11 01:44 প্রথম নথিভুক্ত রান 3.0 প্রযোজ্য নয় $0.000 বর্তমান রান

রান তুলনা

রানবেঞ্চমার্ক কভারেজস্কোরধারাবাহিকতানির্ভরযোগ্যতাসঠিক টেস্টঅস্থির টেস্টমোট আউটপুট টোকেনমোট ইনপুট টোকেনমোট খরচপ্রতিক্রিয়া সময় (গড়)
2026-04-11 01:44 · প্রথম নথিভুক্ত রান3/3 প্রচেষ্টা3.010.0প্রযোজ্য নয়0/1000$0.0000ms
2026-05-08 15:30 · নতুন টেস্ট যোগ হয়েছে36/36 প্রচেষ্টা2.35.510.06/12064,7951,971$0.02039.03s
পার্থক্য+0.7+4.5-60-64795-1971-$0.020-39032ms

বেঞ্চমার্ক কভারেজ আলাদা: 3/3 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 36/36 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।

এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।

চার্ট

প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

বিভাগ স্কোর ধারাবাহিকতা সঠিক টেস্ট
কোডিং 3.0 10.0

তুলনা করা মডেল