#79 Mistral Small 4
medium- খরচ
- $0.006
- সময়
- 47.9s
- টোকেন
- 9,857 tok
সারাংশ
Mistral Small 4 AI BENCHY-তে 5.7 স্কোর করে এবং #79 স্থানে আছে। এর reliability প্রযোজ্য নয়, pass rate 50.0%, মোট খরচ $0.034, এবং গড় response time 5.64s.
Mistral Small 4 কে আলাদা করে যা: এই score range-এর জন্য মোট benchmark খরচ অস্বাভাবিকভাবে কম। একই ধরনের মডেলের তুলনায় এটি লক্ষণীয়ভাবে দ্রুত।
গবেষণার তারিখ: 2026-08-12
5.7
ধারাবাহিকতা
6.8
প্রযোজ্য নয়
$0.034
মোট আউটপুট টোকেন
54,492
মোট ইনপুট টোকেন
0
ইনপুট মূল্য
$0.150 / 1M
আউটপুট মূল্য
$0.600 / 1M
অস্থির টেস্ট
7
অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
রান ইতিহাস
| পরীক্ষিত হয়েছে | স্কোর | নির্ভরযোগ্যতা | সঠিক টেস্ট | মোট খরচ | তুলনা করুন |
|---|---|---|---|---|---|
| 2026-08-14 02:05 পুনরায় পরীক্ষা | 5.1 | 10.0 | $0.097 | তুলনা করুন | |
| 2026-07-16 22:23 নতুন টেস্ট যোগ হয়েছে | 5.1 | 10.0 | $0.096 | তুলনা করুন | |
| 2026-06-04 13:43 নতুন টেস্ট যোগ হয়েছে | 5.3 | 10.0 | $0.068 | তুলনা করুন | |
| 2026-05-22 00:16 স্যুইট পরিবর্তিত হয়েছে | 5.4 | 10.0 | $0.056 | তুলনা করুন | |
| 2026-04-11 01:44 প্রথম নথিভুক্ত রান | 5.7 | প্রযোজ্য নয় | $0.034 | বর্তমান রান |
রান তুলনা
| রান | বেঞ্চমার্ক কভারেজ | স্কোর | ধারাবাহিকতা | নির্ভরযোগ্যতা | সঠিক টেস্ট | অস্থির টেস্ট | মোট আউটপুট টোকেন | মোট ইনপুট টোকেন | মোট খরচ | প্রতিক্রিয়া সময় (গড়) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · প্রথম নথিভুক্ত রান | 54/54 প্রচেষ্টা | 5.7 | 6.8 | প্রযোজ্য নয় | 5/18 | 7 | 54,492 | 0 | $0.034 | 5.64s |
| 2026-08-14 02:05 · পুনরায় পরীক্ষা | 66/66 প্রচেষ্টা | 5.1 | 7.0 | 10.0 | 5/22 | 8 | 133,597 | 140,559 | $0.097 | 10.80s |
| পার্থক্য | — | +0.5 | -0.2 | 0 | -1 | -79105 | -140559 | -$0.063 | -5160ms |
বেঞ্চমার্ক কভারেজ আলাদা: 54/54 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 66/66 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।
এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।
প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।
| বিভাগ | স্কোর | ধারাবাহিকতা | সঠিক টেস্ট |
|---|---|---|---|
| অ্যান্টি-এআই কৌশল | 5.6 | 3.8 | |
| কোডিং | 6.7 | 3.5 | |
| সমন্বিত | 3.0 | 10.0 | |
| ডেটা পার্সিং ও নিষ্কাশন | 7.3 | 5.9 | |
| ডোমেইন-নির্দিষ্ট | 5.3 | 7.2 | |
| Sadharon Buddhimotta | 4.8 | 10.0 | |
| নির্দেশনা অনুসরণ | 7.3 | 5.8 | |
| ধাঁধা সমাধান | 3.4 | 9.7 | |
| টুল কলিং | 10.0 | 10.0 |