AI BENCHY
Advertise here
#90

Mercury 2

Inception প্রকাশ: 2026-02-24 পরীক্ষিত হয়েছে: 2026-05-22 00:40 inception/mercury-2::medium
~100Bঅন্যান্যবন্ধ উৎসআনুমানিক
(medium) (none)

সারাংশ

Mercury 2 AI BENCHY-তে 6.3 স্কোর করে এবং #90 স্থানে আছে। এর reliability 10.0, pass rate 50.0%, মোট খরচ $0.055, এবং গড় response time 2.27s.

Mercury 2 কে আলাদা করে যা: একই ধরনের মডেলের তুলনায় এটি লক্ষণীয়ভাবে দ্রুত।

মডেলের তথ্য

গবেষণার তারিখ: 2026-08-12

আনুমানিক
প্যারামিটার
~100B
আর্কিটেকচার
অন্যান্য
উপলভ্যতা
বন্ধ উৎস
লাইসেন্স
-

সর্বজনীন তথ্যপ্রমাণের ভিত্তিতে সেরা অনুমান; প্রদানকারী সব মান প্রকাশ করেনি।

ধারাবাহিকতা

8.4

মোট আউটপুট টোকেন

62,397

মোট ইনপুট টোকেন

0

ইনপুট মূল্য

$0.250 / 1M

আউটপুট মূল্য

$0.750 / 1M

সঠিক টেস্ট

ভুল টেস্ট: 12

প্রতি চেষ্টায় পাস রেট: 50.0%

অস্থির টেস্ট

4

অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।

প্রতিক্রিয়া সময় (গড়)

2.27s

প্রতিক্রিয়া সময় (সর্বোচ্চ): 14.63s

প্রতিক্রিয়া সময় (মোট): 43.15s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#90 Mercury 2

medium
খরচ
$0.002
সময়
2.1s
টোকেন
1,702 tok

রান ইতিহাস

পরীক্ষিত হয়েছে স্কোর নির্ভরযোগ্যতা সঠিক টেস্ট মোট খরচ তুলনা করুন
2026-08-14 03:05 পুনরায় পরীক্ষা 7.0 10.0 $0.094 তুলনা করুন
2026-07-16 23:14 নতুন টেস্ট যোগ হয়েছে 7.0 10.0 $0.093 তুলনা করুন
2026-06-04 14:27 নতুন টেস্ট যোগ হয়েছে 6.6 10.0 $0.058 তুলনা করুন
2026-05-22 00:40 পুনরায় পরীক্ষা 6.3 10.0 $0.055 বর্তমান রান
2026-04-11 01:44 প্রথম নথিভুক্ত রান 6.5 প্রযোজ্য নয় $0.047 তুলনা করুন

রান তুলনা

রানবেঞ্চমার্ক কভারেজস্কোরধারাবাহিকতানির্ভরযোগ্যতাসঠিক টেস্টঅস্থির টেস্টমোট আউটপুট টোকেনমোট ইনপুট টোকেনমোট খরচপ্রতিক্রিয়া সময় (গড়)
2026-05-22 00:40 · পুনরায় পরীক্ষা60/60 প্রচেষ্টা6.38.410.08/20462,3970$0.0552.27s
2026-06-04 14:27 · নতুন টেস্ট যোগ হয়েছে63/63 প্রচেষ্টা6.68.810.010/21365,26735,116$0.0582.24s
পার্থক্য-0.4-0.40.0-2+1-2870-35116-$0.003+35ms

বেঞ্চমার্ক কভারেজ আলাদা: 60/60 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 63/63 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।

এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।

চার্ট

প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

দ্রুত তুলনা

বিভাগভিত্তিক বিশ্লেষণ

বিভাগ স্কোর ধারাবাহিকতা সঠিক টেস্ট
অ্যান্টি-এআই কৌশল 6.9 9.9
কোডিং 7.2 6.5
সমন্বিত 10.0 10.0
ডেটা পার্সিং ও নিষ্কাশন 7.3 5.9
ডোমেইন-নির্দিষ্ট 2.9 7.2
Sadharon Buddhimotta 4.8 10.0
নির্দেশনা অনুসরণ 10.0 10.0
ধাঁধা সমাধান 3.8 7.3
টুল কলিং 10.0 10.0
সাধারণ জ্ঞান 3.0 10.0

তুলনা করা মডেল