AI BENCHY
Advertise here
#99

Mercury 2

Inception প্রকাশ: 2026-02-24 পরীক্ষিত হয়েছে: 2026-04-11 01:44 inception/mercury-2::none
~100Bঅন্যান্যবন্ধ উৎসআনুমানিক
(medium) (none)

সারাংশ

Mercury 2 AI BENCHY-তে 4.8 স্কোর করে এবং #99 স্থানে আছে। এর reliability প্রযোজ্য নয়, pass rate 27.8%, মোট খরচ $0.007, এবং গড় response time 613ms.

Mercury 2 কে আলাদা করে যা: এই score range-এর জন্য মোট benchmark খরচ অস্বাভাবিকভাবে কম। একই ধরনের মডেলের তুলনায় এটি লক্ষণীয়ভাবে দ্রুত।

মডেলের তথ্য

গবেষণার তারিখ: 2026-08-12

আনুমানিক
প্যারামিটার
~100B
আর্কিটেকচার
অন্যান্য
উপলভ্যতা
বন্ধ উৎস
লাইসেন্স
-

সর্বজনীন তথ্যপ্রমাণের ভিত্তিতে সেরা অনুমান; প্রদানকারী সব মান প্রকাশ করেনি।

ধারাবাহিকতা

9.0

নির্ভরযোগ্যতা

প্রযোজ্য নয়

মোট আউটপুট টোকেন

1,625

মোট ইনপুট টোকেন

0

ইনপুট মূল্য

$0.250 / 1M

আউটপুট মূল্য

$0.750 / 1M

সঠিক টেস্ট

ভুল টেস্ট: 14

প্রতি চেষ্টায় পাস রেট: 27.8%

অস্থির টেস্ট

2

অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।

প্রতিক্রিয়া সময় (গড়)

613ms

প্রতিক্রিয়া সময় (সর্বোচ্চ): 1.27s

প্রতিক্রিয়া সময় (মোট): 11.04s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#99 Mercury 2

none
খরচ
$0.002
সময়
1.8s
টোকেন
1,514 tok

রান ইতিহাস

পরীক্ষিত হয়েছে স্কোর নির্ভরযোগ্যতা সঠিক টেস্ট মোট খরচ তুলনা করুন
2026-08-14 03:05 পুনরায় পরীক্ষা 4.7 10.0 $0.030 তুলনা করুন
2026-07-16 23:13 নতুন টেস্ট যোগ হয়েছে 4.6 10.0 $0.030 তুলনা করুন
2026-06-04 14:27 নতুন টেস্ট যোগ হয়েছে 4.5 10.0 $0.011 তুলনা করুন
2026-05-22 00:39 স্যুইট পরিবর্তিত হয়েছে 4.6 10.0 $0.009 তুলনা করুন
2026-04-11 01:44 প্রথম নথিভুক্ত রান 4.8 প্রযোজ্য নয় $0.007 বর্তমান রান

রান তুলনা

রানবেঞ্চমার্ক কভারেজস্কোরধারাবাহিকতানির্ভরযোগ্যতাসঠিক টেস্টঅস্থির টেস্টমোট আউটপুট টোকেনমোট ইনপুট টোকেনমোট খরচপ্রতিক্রিয়া সময় (গড়)
2026-04-11 01:44 · প্রথম নথিভুক্ত রান54/54 প্রচেষ্টা4.89.0প্রযোজ্য নয়4/1821,6250$0.007613ms
2026-08-14 03:05 · পুনরায় পরীক্ষা66/66 প্রচেষ্টা4.79.210.04/2229,58489,637$0.030825ms
পার্থক্য+0.1-0.200-7959-89637-$0.024-211ms

বেঞ্চমার্ক কভারেজ আলাদা: 54/54 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 66/66 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।

এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।

চার্ট

প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

দ্রুত তুলনা

বিভাগভিত্তিক বিশ্লেষণ

বিভাগ স্কোর ধারাবাহিকতা সঠিক টেস্ট
অ্যান্টি-এআই কৌশল 3.0 10.0
কোডিং 3.6 8.9
সমন্বিত 3.0 10.0
ডেটা পার্সিং ও নিষ্কাশন 7.3 5.9
ডোমেইন-নির্দিষ্ট 5.3 7.2
Sadharon Buddhimotta 4.8 10.0
নির্দেশনা অনুসরণ 6.5 10.0
ধাঁধা সমাধান 3.1 10.0
টুল কলিং 10.0 10.0

তুলনা করা মডেল