নেভিগেশন
Advertise here

Mercury 2.5 (medium) vs KAT-Coder-Pro V2.5

average score প্রায় সমান: 6.8 vs 6.7. Mercury 2.5 (medium)-এর benchmark খরচ কম: $0.022 vs $0.487. Mercury 2.5 (medium) দ্রুত: 3.19s vs 26.01s, pass rates 65.2% vs 71.2%.

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-09-08

তুলনা করা মডেল

র‍্যাঙ্ক
#157
মোট আউটপুট টোকেন
120,129
প্রতিক্রিয়া সময় (গড়)
3.19s
মোট খরচ
$0.022
র‍্যাঙ্ক
#161
মোট আউটপুট টোকেন
139,572
প্রতিক্রিয়া সময় (গড়)
26.01s
মোট খরচ
$0.487
প্রস্তাবিত মডেল Mercury 2.5 (medium)

It has the best score here (6.8), while costing about 22.4x less than KAT-Coder-Pro V2.5.

বিস্তারিত তুলনা

মেট্রিক Mercury 2.5 Mercury 2.5 medium প্রকাশ: 2026-09-08 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none প্রকাশ: 2026-07-14
স্কোর 6.8 6.7
র‍্যাঙ্ক #157 #161
নির্ভরযোগ্যতা 9.8 10.0
ধারাবাহিকতা 8.6 7.0
প্রচেষ্টা 66/66 66/66
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 65.2% 71.2%
অস্থির টেস্ট 4 8
মোট রান 66 66
প্রতি ফলাফলে খরচ 0.181 4.419
মোট খরচ $0.022 $0.487
ইনপুট মূল্য $0.040 / 1M $0.740 / 1M
আউটপুট মূল্য $0.150 / 1M $2.960 / 1M
মোট ইনপুট টোকেন 91,402 98,508
আউটপুট টোকেন 3,138 139,572
রিজনিং টোকেন 116,991 0
প্রতিক্রিয়া সময় (গড়) 3.19s 26.01s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 9.87s 335.41s
প্রতিক্রিয়া সময় (মোট) 70.18s 572.22s
প্যারামিটার ~100B ~700B মোট (~72B সক্রিয়)
উপলভ্যতা বন্ধ উৎস বন্ধ উৎস

মডেল জেনারেশন শোকেস

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#157 Mercury 2.5

medium
খরচ
$0.001
সময়
3.8s
টোকেন
3,386 tok

#161 KAT-Coder-Pro V2.5

none
খরচ
$0.010
সময়
29.0s
টোকেন
3,439 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0

দ্রুত তুলনা

তুলনার জুটি বদলান