#218 Mercury 2
medium- খরচ
- $0.002
- সময়
- 2.1s
- টোকেন
- 1,702 tok
সারাংশ
Mercury 2 AI BENCHY-তে 6.6 স্কোর করে এবং #218 স্থানে আছে। এর reliability 10.0, pass rate 53.6%, মোট খরচ $0.121, এবং গড় response time 4.40s.
Mercury 2 কে আলাদা করে যা: এটি নির্দেশনা অনুসরণ-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #1; আর ডোমেইন-নির্দিষ্ট এর দুর্বলতম ক্ষেত্র, rank #15. একই ধরনের মডেলের তুলনায় এটি লক্ষণীয়ভাবে দ্রুত।
গবেষণার তারিখ: 2026-08-12
সর্বজনীন তথ্যপ্রমাণের ভিত্তিতে সেরা অনুমান; প্রদানকারী সব মান প্রকাশ করেনি।
6.6
ধারাবাহিকতা
8.1
10.0
$0.121
মোট আউটপুট টোকেন
96,943
মোট ইনপুট টোকেন
189,300
ইনপুট মূল্য
$0.250 / 1M
আউটপুট মূল্য
$0.750 / 1M
ক্যাশ পড়ার মূল্য
$0.025 / 1M
ক্যাশ লেখার মূল্য
প্রযোজ্য নয়
ক্যাশের মূল্য ইনপুট টোকেনের জন্য প্রযোজ্য। পড়ার সময় ক্যাশ করা প্রম্পট আবার ব্যবহার হয়; লেখার সময় সেগুলি সংরক্ষিত হয় এবং বাড়তি খরচ হতে পারে। আউটপুট টোকেনের জন্য আউটপুট মূল্য প্রযোজ্য।
অস্থির টেস্ট
5
অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
রান ইতিহাস
| পরীক্ষিত হয়েছে | স্কোর | নির্ভরযোগ্যতা | সঠিক টেস্ট | মোট খরচ | তুলনা করুন |
|---|---|---|---|---|---|
| 2026-10-01 02:52 পুনরায় পরীক্ষা | 6.6 | 10.0 | $0.121 | বর্তমান রান | |
| 2026-07-16 23:14 নতুন টেস্ট যোগ হয়েছে | 7.0 | 10.0 | $0.093 | তুলনা করুন | |
| 2026-06-04 14:27 নতুন টেস্ট যোগ হয়েছে | 6.6 | 10.0 | $0.058 | তুলনা করুন | |
| 2026-05-22 00:40 পুনরায় পরীক্ষা | 6.3 | 10.0 | $0.055 | তুলনা করুন | |
| 2026-04-11 01:44 প্রথম নথিভুক্ত রান | 6.5 | প্রযোজ্য নয় | $0.047 | তুলনা করুন |
এই রানটি ভিন্ন একটি বেঞ্চমার্ক স্যুইট ব্যবহার করেছে। ঐতিহাসিক পরিবর্তন পড়ার সময় স্যুইট পরিবর্তনও মাথায় রাখুন।
রান তুলনা
| রান | বেঞ্চমার্ক কভারেজ | স্কোর | ধারাবাহিকতা | নির্ভরযোগ্যতা | সঠিক টেস্ট | অস্থির টেস্ট | মোট আউটপুট টোকেন | মোট ইনপুট টোকেন | মোট খরচ | প্রতিক্রিয়া সময় (গড়) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 02:52 · বর্তমান রান | 69/69 প্রচেষ্টা | 6.6 | 8.1 | 10.0 | 10/23 | 5 | 96,943 | 189,300 | $0.121 | 4.40s |
| 2026-06-04 14:27 · নতুন টেস্ট যোগ হয়েছে | 63/63 প্রচেষ্টা | 6.6 | 8.8 | 10.0 | 10/21 | 3 | 65,267 | 35,116 | $0.058 | 2.24s |
| পার্থক্য | — | -0.1 | -0.7 | 0.0 | 0 | +2 | +31676 | +154184 | +$0.063 | +2165ms |
বেঞ্চমার্ক কভারেজ আলাদা: 69/69 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 63/63 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।
এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।
মূল্যের ইতিহাস
OpenRouter থেকে এই মডেলের ঐতিহাসিক মূল্য তথ্য।
| তারিখ | ইনপুট মূল্য | আউটপুট মূল্য | ক্যাশ পড়ার মূল্য | ক্যাশ লেখার মূল্য |
|---|---|---|---|---|
| 2026-08-14 12:51 | $0.250 / 1M | $0.750 / 1M | প্রযোজ্য নয় | প্রযোজ্য নয় |
| 2026-10-01 18:33 | $0.250 / 1M | $0.750 / 1M | $0.025 / 1M | প্রযোজ্য নয় |
প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।
| বিভাগ | স্কোর | ধারাবাহিকতা | সঠিক টেস্ট |
|---|---|---|---|
| স্বায়ত্তশাসিত এজেন্টের কাজ | 4.7 | 1.6 | |
| অ্যান্টি-এআই কৌশল | 6.9 | 9.9 | |
| কোডিং | 8.2 | 7.7 | |
| সমন্বিত | 6.7 | 9.1 | |
| ডেটা পার্সিং ও নিষ্কাশন | 7.3 | 5.9 | |
| ডোমেইন-নির্দিষ্ট | 2.9 | 4.4 | |
| Sadharon Buddhimotta | 4.8 | 10.0 | |
| নির্দেশনা অনুসরণ | 10.0 | 10.0 | |
| ধাঁধা সমাধান | 5.4 | 10.0 | |
| টুল কলিং | 10.0 | 10.0 | |
| সাধারণ জ্ঞান | 3.0 | 10.0 |