#121 Mistral Small 4
medium- খরচ
- $0.006
- সময়
- 47.9s
- টোকেন
- 9,857 tok
সারাংশ
Mistral Small 4 AI BENCHY-তে 5.4 স্কোর করে এবং #121 স্থানে আছে। এর reliability 10.0, pass rate 45.0%, মোট খরচ $0.056, এবং গড় response time 8.33s.
Mistral Small 4 কে আলাদা করে যা: এটি ডোমেইন-নির্দিষ্ট-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #4; আর কোডিং এর দুর্বলতম ক্ষেত্র, rank #18. এই score range-এর জন্য মোট benchmark খরচ অস্বাভাবিকভাবে কম।
গবেষণার তারিখ: 2026-08-12
5.4
ধারাবাহিকতা
7.1
10.0
$0.056
মোট আউটপুট টোকেন
89,683
মোট ইনপুট টোকেন
0
ইনপুট মূল্য
$0.150 / 1M
আউটপুট মূল্য
$0.600 / 1M
অস্থির টেস্ট
7
অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
রান ইতিহাস
| পরীক্ষিত হয়েছে | স্কোর | নির্ভরযোগ্যতা | সঠিক টেস্ট | মোট খরচ | তুলনা করুন |
|---|---|---|---|---|---|
| 2026-08-14 02:05 পুনরায় পরীক্ষা | 5.1 | 10.0 | $0.097 | তুলনা করুন | |
| 2026-07-16 22:23 নতুন টেস্ট যোগ হয়েছে | 5.1 | 10.0 | $0.096 | তুলনা করুন | |
| 2026-06-04 13:43 নতুন টেস্ট যোগ হয়েছে | 5.3 | 10.0 | $0.068 | তুলনা করুন | |
| 2026-05-22 00:16 স্যুইট পরিবর্তিত হয়েছে | 5.4 | 10.0 | $0.056 | বর্তমান রান | |
| 2026-04-11 01:44 প্রথম নথিভুক্ত রান | 5.7 | প্রযোজ্য নয় | $0.034 | তুলনা করুন |
এই রানটি ভিন্ন একটি বেঞ্চমার্ক স্যুইট ব্যবহার করেছে। ঐতিহাসিক পরিবর্তন পড়ার সময় স্যুইট পরিবর্তনও মাথায় রাখুন।
রান তুলনা
| রান | বেঞ্চমার্ক কভারেজ | স্কোর | ধারাবাহিকতা | নির্ভরযোগ্যতা | সঠিক টেস্ট | অস্থির টেস্ট | মোট আউটপুট টোকেন | মোট ইনপুট টোকেন | মোট খরচ | প্রতিক্রিয়া সময় (গড়) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:16 · স্যুইট পরিবর্তিত হয়েছে | 60/60 প্রচেষ্টা | 5.4 | 7.1 | 10.0 | 5/20 | 7 | 89,683 | 0 | $0.056 | 8.33s |
| 2026-04-11 01:44 · প্রথম নথিভুক্ত রান | 54/54 প্রচেষ্টা | 5.7 | 6.8 | প্রযোজ্য নয় | 5/18 | 7 | 54,492 | 0 | $0.034 | 5.64s |
| পার্থক্য | — | -0.3 | +0.3 | 0 | 0 | +35191 | 0 | +$0.022 | +2689ms |
বেঞ্চমার্ক কভারেজ আলাদা: 60/60 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 54/54 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।
এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।
প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।
| বিভাগ | স্কোর | ধারাবাহিকতা | সঠিক টেস্ট |
|---|---|---|---|
| অ্যান্টি-এআই কৌশল | 5.6 | 3.8 | |
| কোডিং | 5.1 | 6.8 | |
| সমন্বিত | 3.0 | 10.0 | |
| ডেটা পার্সিং ও নিষ্কাশন | 7.3 | 5.9 | |
| ডোমেইন-নির্দিষ্ট | 5.3 | 7.2 | |
| Sadharon Buddhimotta | 4.8 | 10.0 | |
| নির্দেশনা অনুসরণ | 7.3 | 5.8 | |
| ধাঁধা সমাধান | 3.4 | 9.7 | |
| টুল কলিং | 10.0 | 10.0 | |
| সাধারণ জ্ঞান | 3.0 | 10.0 |