নেভিগেশন
Advertise here

Mercury 2.5 (high) vs KAT-Coder-Pro V2.5 (low)

KAT-Coder-Pro V2.5 (low) average score-এ এগিয়ে: 6.5 vs 6.5. Mercury 2.5 (high)-এর benchmark খরচ কম: $0.044 vs $0.400. Mercury 2.5 (high) দ্রুত: 7.62s vs 19.40s, pass rates 59.4% vs 65.2%.

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-10-01

তুলনা করা মডেল

র‍্যাঙ্ক
#195
মোট আউটপুট টোকেন
193,676
প্রতিক্রিয়া সময় (গড়)
7.62s
মোট খরচ
$0.044
র‍্যাঙ্ক
#191
মোট আউটপুট টোকেন
113,193
প্রতিক্রিয়া সময় (গড়)
19.40s
মোট খরচ
$0.400
প্রস্তাবিত মডেল Mercury 2.5 (high)

Its score stays close to the best score here (6.5 vs 6.5), while costing about 9.2x less than KAT-Coder-Pro V2.5 (low).

বিস্তারিত তুলনা

মেট্রিক Mercury 2.5 Mercury 2.5 high প্রকাশ: 2026-09-08 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low প্রকাশ: 2026-07-14
স্কোর 6.5 6.5
র‍্যাঙ্ক #195 #191
নির্ভরযোগ্যতা 9.8 10.0
ধারাবাহিকতা 8.7 7.1
প্রচেষ্টা 69/69 69/69
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 59.4% 65.2%
অস্থির টেস্ট 4 8
মোট রান 69 69
প্রতি ফলাফলে খরচ 0.362 3.636
মোট খরচ $0.044 $0.400
ইনপুট মূল্য $0.040 / 1M $0.740 / 1M
আউটপুট মূল্য $0.150 / 1M $2.960 / 1M
মোট ইনপুট টোকেন 358,562 87,682
আউটপুট টোকেন 4,266 7,166
রিজনিং টোকেন 189,410 106,027
প্রতিক্রিয়া সময় (গড়) 7.62s 19.40s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 80.30s 209.15s
প্রতিক্রিয়া সময় (মোট) 175.36s 446.11s
প্যারামিটার ~100B ~700B মোট (~72B সক্রিয়)
উপলভ্যতা বন্ধ উৎস বন্ধ উৎস

মডেল জেনারেশন শোকেস

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#195 Mercury 2.5

high
খরচ
$0.001
সময়
3.5s
টোকেন
2,447 tok

#191 KAT-Coder-Pro V2.5

low
খরচ
$0.016
সময়
47.6s
টোকেন
5,182 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

দ্রুত তুলনা

তুলনার জুটি বদলান