AI BENCHY
Advertise here
#82

Step 3.7 Flash

Stepfun প্রকাশ: 2026-05-29 পরীক্ষিত হয়েছে: 2026-07-16 22:46 stepfun/step-3.7-flash::high
198B মোট (11B সক্রিয়)MoEউন্মুক্ত উৎস
(high) (medium) (low)

সারাংশ

Step 3.7 Flash AI BENCHY-তে 6.9 স্কোর করে এবং #82 স্থানে আছে। এর reliability 10.0, pass rate 63.6%, মোট খরচ $1.207, এবং গড় response time 64.68s.

Step 3.7 Flash কে আলাদা করে যা: এটি অ্যান্টি-এআই কৌশল-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #1; আর কোডিং এর দুর্বলতম ক্ষেত্র, rank #17.

মডেলের তথ্য

গবেষণার তারিখ: 2026-08-12

প্রকাশিত
প্যারামিটার
198B মোট (11B সক্রিয়)
আর্কিটেকচার
MoE
উপলভ্যতা
উন্মুক্ত উৎস
লাইসেন্স
Apache-2.0

ধারাবাহিকতা

8.0

মোট আউটপুট টোকেন

1,032,395

মোট ইনপুট টোকেন

98,691

ইনপুট মূল্য

$0.200 / 1M

আউটপুট মূল্য

$1.150 / 1M

সঠিক টেস্ট

ভুল টেস্ট: 11

প্রতি চেষ্টায় পাস রেট: 63.6%

অস্থির টেস্ট

5

অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।

প্রতিক্রিয়া সময় (গড়)

64.68s

প্রতিক্রিয়া সময় (সর্বোচ্চ): 364.99s

প্রতিক্রিয়া সময় (মোট): 1423.01s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#82 Step 3.7 Flash

high
খরচ
$0.007
সময়
63.6s
টোকেন
6,030 tok

রান ইতিহাস

পরীক্ষিত হয়েছে স্কোর নির্ভরযোগ্যতা সঠিক টেস্ট মোট খরচ তুলনা করুন
2026-08-14 02:45 পুনরায় পরীক্ষা 6.8 10.0 $1.229 তুলনা করুন
2026-07-16 22:46 নতুন টেস্ট যোগ হয়েছে 6.9 10.0 $1.207 বর্তমান রান
2026-06-04 14:10 নতুন টেস্ট যোগ হয়েছে 7.0 10.0 $1.148 তুলনা করুন
2026-05-29 11:53 প্রথম রান 7.1 9.9 $0.960 তুলনা করুন

এই রানটি ভিন্ন একটি বেঞ্চমার্ক স্যুইট ব্যবহার করেছে। ঐতিহাসিক পরিবর্তন পড়ার সময় স্যুইট পরিবর্তনও মাথায় রাখুন।

রান তুলনা

রানবেঞ্চমার্ক কভারেজস্কোরধারাবাহিকতানির্ভরযোগ্যতাসঠিক টেস্টঅস্থির টেস্টমোট আউটপুট টোকেনমোট ইনপুট টোকেনমোট খরচপ্রতিক্রিয়া সময় (গড়)
2026-07-16 22:46 · নতুন টেস্ট যোগ হয়েছে66/66 প্রচেষ্টা6.98.010.011/2251,032,39598,691$1.20764.68s
2026-05-29 11:53 · প্রথম রান60/60 প্রচেষ্টা7.18.29.911/204828,0840$0.96049.43s
পার্থক্য-0.3-0.2+0.10+1+204311+98691+$0.248+15254ms

বেঞ্চমার্ক কভারেজ আলাদা: 66/66 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 60/60 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।

এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।

মূল্যের ইতিহাস

OpenRouter থেকে এই মডেলের ঐতিহাসিক মূল্য তথ্য।

তারিখ ইনপুট মূল্য আউটপুট মূল্য
2026-06-04 15:40 $0.200 / 1M $1.150 / 1M

চার্ট

প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

দ্রুত তুলনা

বিভাগভিত্তিক বিশ্লেষণ

বিভাগ স্কোর ধারাবাহিকতা সঠিক টেস্ট
অ্যান্টি-এআই কৌশল 10.0 10.0
কোডিং 4.0 6.0
সমন্বিত 8.7 6.9
ডেটা পার্সিং ও নিষ্কাশন 10.0 10.0
ডোমেইন-নির্দিষ্ট 4.1 4.4
Sadharon Buddhimotta 5.5 10.0
নির্দেশনা অনুসরণ 9.8 10.0
ধাঁধা সমাধান 5.3 7.2
টুল কলিং 10.0 10.0
সাধারণ জ্ঞান 3.0 10.0

তুলনা করা মডেল