#334 North Mini Code
medium- খরচ
- $0.000
- সময়
- 51.8s
- টোকেন
- 12,460 tok
সারাংশ
North Mini Code AI BENCHY-তে 5.4 স্কোর করে এবং #334 স্থানে আছে। এর reliability 8.9, pass rate 42.0%, মোট খরচ $0.000, এবং গড় response time 140.39s.
North Mini Code কে আলাদা করে যা: এটি অ্যান্টি-এআই কৌশল-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #2; আর ডোমেইন-নির্দিষ্ট এর দুর্বলতম ক্ষেত্র, rank #14. এই score range-এর জন্য মোট benchmark খরচ অস্বাভাবিকভাবে কম। এটি অস্বাভাবিকভাবে বেশি reasoning tokens ব্যবহার করে, যা ধীর বা বেশি খরচের runs ব্যাখ্যা করতে পারে।
গবেষণার তারিখ: 2026-08-12
5.4
ধারাবাহিকতা
8.6
$0.000
মোট আউটপুট টোকেন
1,359,341
মোট ইনপুট টোকেন
166,347
ইনপুট মূল্য
$0.000 / 1M
আউটপুট মূল্য
$0.000 / 1M
ক্যাশ পড়ার মূল্য
প্রযোজ্য নয়
ক্যাশ লেখার মূল্য
প্রযোজ্য নয়
ক্যাশের মূল্য ইনপুট টোকেনের জন্য প্রযোজ্য। পড়ার সময় ক্যাশ করা প্রম্পট আবার ব্যবহার হয়; লেখার সময় সেগুলি সংরক্ষিত হয় এবং বাড়তি খরচ হতে পারে। আউটপুট টোকেনের জন্য আউটপুট মূল্য প্রযোজ্য।
ভুল টেস্ট: 15
প্রতি চেষ্টায় পাস রেট: 42.0%
বেঞ্চমার্ক কভারেজ: 61/69 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)
অস্থির টেস্ট
4
অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।
140.39s
প্রতিক্রিয়া সময় (সর্বোচ্চ): 786.72s
প্রতিক্রিয়া সময় (মোট): 3229.07s
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
রান ইতিহাস
| পরীক্ষিত হয়েছে | স্কোর | নির্ভরযোগ্যতা | সঠিক টেস্ট | মোট খরচ | তুলনা করুন |
|---|---|---|---|---|---|
| 2026-10-01 03:03 পুনরায় পরীক্ষা | 5.4 | 8.9 | $0.000 | বর্তমান রান | |
| 2026-07-16 23:46 নতুন টেস্ট যোগ হয়েছে | 5.9 | 8.6 | $0.000 | তুলনা করুন | |
| 2026-06-18 09:44 প্রথম রান | 5.8 | 8.5 | $0.000 | তুলনা করুন |
এই রানটি ভিন্ন একটি বেঞ্চমার্ক স্যুইট ব্যবহার করেছে। ঐতিহাসিক পরিবর্তন পড়ার সময় স্যুইট পরিবর্তনও মাথায় রাখুন।
রান তুলনা
| রান | বেঞ্চমার্ক কভারেজ | স্কোর | ধারাবাহিকতা | নির্ভরযোগ্যতা | সঠিক টেস্ট | অস্থির টেস্ট | মোট আউটপুট টোকেন | মোট ইনপুট টোকেন | মোট খরচ | প্রতিক্রিয়া সময় (গড়) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 03:03 · বর্তমান রান | 61/69 প্রচেষ্টা | 5.4 | 8.6 | 8.9 | 8/23 | 4 | 1,359,341 | 166,347 | $0.000 | 140.39s |
| 2026-07-16 23:46 · নতুন টেস্ট যোগ হয়েছে | 58/66 প্রচেষ্টা | 5.9 | 8.5 | 8.6 | 9/22 | 4 | 1,766,801 | 81,813 | $0.000 | 137.11s |
| পার্থক্য | — | -0.5 | +0.1 | +0.3 | -1 | 0 | -407460 | +84534 | $0.000 | +3285ms |
বেঞ্চমার্ক কভারেজ আলাদা: 61/69 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 58/66 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।
এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।
প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।
| বিভাগ | স্কোর | ধারাবাহিকতা | সঠিক টেস্ট |
|---|---|---|---|
| স্বায়ত্তশাসিত এজেন্টের কাজ | 3.9 | 9.6 | |
| অ্যান্টি-এআই কৌশল | 8.4 | 10.0 | |
| কোডিং | 4.5 | 4.9 | |
| সমন্বিত | 2.9 | 5.8 | |
| ডেটা পার্সিং ও নিষ্কাশন | 10.0 | 10.0 | |
| ডোমেইন-নির্দিষ্ট | 2.9 | 7.2 | |
| Sadharon Buddhimotta | 5.1 | 10.0 | |
| নির্দেশনা অনুসরণ | 9.8 | 10.0 | |
| ধাঁধা সমাধান | 3.3 | 10.0 | |
| টুল কলিং | 10.0 | 10.0 | |
| সাধারণ জ্ঞান | 3.0 | 10.0 |