নেভিগেশন
AI BENCHY
Advertise here

Mercury 2 (medium) vs KAT-Coder-Pro V2.5 (medium)

Mercury 2 (medium) average score-এ এগিয়ে: 7.0 vs 6.9. Mercury 2 (medium)-এর benchmark খরচ কম: $0.094 vs $0.478. Mercury 2 (medium) দ্রুত: 2.95s vs 24.87s, pass rates 53.0% vs 65.2%.

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-08-26

র‍্যাঙ্ক
#122
মোট আউটপুট টোকেন
87,554
প্রতিক্রিয়া সময় (গড়)
2.95s
মোট খরচ
$0.094
র‍্যাঙ্ক
#126
মোট আউটপুট টোকেন
139,375
প্রতিক্রিয়া সময় (গড়)
24.87s
মোট খরচ
$0.478
প্রস্তাবিত মডেল Mercury 2 (medium)

It has the best score here (7.0), while costing about 5.1x less than KAT-Coder-Pro V2.5 (medium).

বিস্তারিত তুলনা

মেট্রিক Mercury 2 Mercury 2 medium প্রকাশ: 2026-02-24 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium প্রকাশ: 2026-07-14
স্কোর 7.0 6.9
র‍্যাঙ্ক #122 #126
নির্ভরযোগ্যতা 10.0 10.0
ধারাবাহিকতা 8.4 7.0
প্রচেষ্টা 66/66 66/66
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 53.0% 65.2%
অস্থির টেস্ট 4 8
মোট রান 66 66
প্রতি ফলাফলে খরচ 0.933 4.342
মোট খরচ $0.094 $0.478
ইনপুট মূল্য $0.250 / 1M $0.740 / 1M
আউটপুট মূল্য $0.750 / 1M $2.960 / 1M
মোট ইনপুট টোকেন 110,515 87,916
আউটপুট টোকেন 10,325 7,213
রিজনিং টোকেন 77,229 132,162
প্রতিক্রিয়া সময় (গড়) 2.95s 24.87s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 14.63s 257.00s
প্রতিক্রিয়া সময় (মোট) 61.89s 547.14s
প্যারামিটার ~100B ~700B মোট (~72B সক্রিয়)
উপলভ্যতা বন্ধ উৎস বন্ধ উৎস

মডেল জেনারেশন শোকেস

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#122 Mercury 2

medium
খরচ
$0.002
সময়
2.1s
টোকেন
1,702 tok

#126 KAT-Coder-Pro V2.5

medium
খরচ
$0.009
সময়
25.6s
টোকেন
2,939 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
Mercury 2 8.2 7.7 77.8% 1 2.04s 7,065 296 11,328
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658

দ্রুত তুলনা

তুলনার জুটি বদলান