#22 Step 3.7 Flash
medium- খরচ
- $0.006
- সময়
- 46.2s
- টোকেন
- 4,466 tok
সারাংশ
Step 3.7 Flash AI BENCHY-তে 8.0 স্কোর করে এবং #22 স্থানে আছে। এর reliability 9.9, pass rate 73.0%, মোট খরচ $0.376, এবং গড় response time 20.35s.
Step 3.7 Flash কে আলাদা করে যা: এটি ডোমেইন-নির্দিষ্ট-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #1; আর Sadharon Buddhimotta এর দুর্বলতম ক্ষেত্র, rank #18. এই score range-এর জন্য মোট benchmark খরচ অস্বাভাবিকভাবে কম।
গবেষণার তারিখ: 2026-08-12
8.0
ধারাবাহিকতা
9.3
$0.376
মোট আউটপুট টোকেন
319,958
মোট ইনপুট টোকেন
39,981
ইনপুট মূল্য
$0.200 / 1M
আউটপুট মূল্য
$1.150 / 1M
অস্থির টেস্ট
2
অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।
20.35s
প্রতিক্রিয়া সময় (সর্বোচ্চ): 113.98s
প্রতিক্রিয়া সময় (মোট): 427.42s
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
রান ইতিহাস
| পরীক্ষিত হয়েছে | স্কোর | নির্ভরযোগ্যতা | সঠিক টেস্ট | মোট খরচ | তুলনা করুন |
|---|---|---|---|---|---|
| 2026-08-14 02:31 পুনরায় পরীক্ষা | 7.9 | 10.0 | $0.495 | তুলনা করুন | |
| 2026-07-16 22:50 নতুন টেস্ট যোগ হয়েছে | 8.0 | 9.9 | $0.515 | তুলনা করুন | |
| 2026-06-04 13:52 নতুন টেস্ট যোগ হয়েছে | 8.0 | 9.9 | $0.376 | বর্তমান রান | |
| 2026-05-29 11:49 প্রথম রান | 7.9 | 9.9 | $0.404 | তুলনা করুন |
এই রানটি ভিন্ন একটি বেঞ্চমার্ক স্যুইট ব্যবহার করেছে। ঐতিহাসিক পরিবর্তন পড়ার সময় স্যুইট পরিবর্তনও মাথায় রাখুন।
রান তুলনা
| রান | বেঞ্চমার্ক কভারেজ | স্কোর | ধারাবাহিকতা | নির্ভরযোগ্যতা | সঠিক টেস্ট | অস্থির টেস্ট | মোট আউটপুট টোকেন | মোট ইনপুট টোকেন | মোট খরচ | প্রতিক্রিয়া সময় (গড়) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-06-04 13:52 · নতুন টেস্ট যোগ হয়েছে | 61/63 প্রচেষ্টা | 8.0 | 9.3 | 9.9 | 14/21 | 2 | 319,958 | 39,981 | $0.376 | 20.35s |
| 2026-08-14 02:31 · পুনরায় পরীক্ষা | 66/66 প্রচেষ্টা | 7.9 | 8.9 | 10.0 | 13/22 | 3 | 409,709 | 114,191 | $0.495 | 23.51s |
| পার্থক্য | — | +0.1 | +0.4 | -0.1 | +1 | -1 | -89751 | -74210 | -$0.119 | -3156ms |
বেঞ্চমার্ক কভারেজ আলাদা: 61/63 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 66/66 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।
এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।
মূল্যের ইতিহাস
OpenRouter থেকে এই মডেলের ঐতিহাসিক মূল্য তথ্য।
| তারিখ | ইনপুট মূল্য | আউটপুট মূল্য |
|---|---|---|
| 2026-06-04 14:42 | $0.200 / 1M | $1.150 / 1M |
প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।
| বিভাগ | স্কোর | ধারাবাহিকতা | সঠিক টেস্ট |
|---|---|---|---|
| অ্যান্টি-এআই কৌশল | 8.7 | 7.9 | |
| কোডিং | 8.8 | 7.8 | |
| সমন্বিত | 10.0 | 10.0 | |
| ডেটা পার্সিং ও নিষ্কাশন | 10.0 | 10.0 | |
| ডোমেইন-নির্দিষ্ট | 7.7 | 10.0 | |
| Sadharon Buddhimotta | 4.0 | 10.0 | |
| নির্দেশনা অনুসরণ | 9.8 | 10.0 | |
| ধাঁধা সমাধান | 5.7 | 9.9 | |
| টুল কলিং | 10.0 | 10.0 | |
| সাধারণ জ্ঞান | 3.0 | 10.0 |