নেভিগেশন
Advertise here

Mercury 2 vs KAT Coder AIR V2.5 (default)

KAT Coder AIR V2.5 (default) average score-এ এগিয়ে: 4.4 vs 4.4. Mercury 2-এর benchmark খরচ কম: $0.033 vs $0.070. Mercury 2 দ্রুত: 1.18s vs 11.96s, pass rates 23.2% vs 34.8%.

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-10-12

তুলনা করা মডেল

র‍্যাঙ্ক
#360
মোট আউটপুট টোকেন
9,709
প্রতিক্রিয়া সময় (গড়)
1.18s
মোট খরচ
$0.033
র‍্যাঙ্ক
#356
মোট আউটপুট টোকেন
97,752
প্রতিক্রিয়া সময় (গড়)
11.96s
মোট খরচ
$0.070
প্রস্তাবিত মডেল Mercury 2

Its score stays close to the best score here (4.4 vs 4.4), while costing about 2.1x less than KAT Coder AIR V2.5 (default).

বিস্তারিত তুলনা

মেট্রিক Mercury 2 Mercury 2 none প্রকাশ: 2026-02-24 KAT Coder AIR V2.5 KAT Coder AIR V2.5 default প্রকাশ: 2026-07-14
স্কোর 4.4 4.4
র‍্যাঙ্ক #360 #356
নির্ভরযোগ্যতা 10.0 10.0
ধারাবাহিকতা 9.2 7.4
প্রচেষ্টা 69/69 69/69
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 23.2% 34.8%
অস্থির টেস্ট 2 7
মোট রান 69 69
প্রতি ফলাফলে খরচ 0.812 1.382
মোট খরচ $0.033 $0.070
ইনপুট মূল্য $0.250 / 1M $0.150 / 1M
আউটপুট মূল্য $0.750 / 1M $0.600 / 1M
ক্যাশ পড়ার মূল্য $0.025 / 1M প্রযোজ্য নয়
ক্যাশ লেখার মূল্য প্রযোজ্য নয় প্রযোজ্য নয়
মোট ইনপুট টোকেন 100,634 69,376
আউটপুট টোকেন 9,609 7,792
রিজনিং টোকেন 100 89,960
প্রতিক্রিয়া সময় (গড়) 1.18s 11.96s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 9.00s 121.05s
প্রতিক্রিয়া সময় (মোট) 27.14s 275.18s
প্যারামিটার ~100B ~35B মোট (~3B সক্রিয়)
উপলভ্যতা বন্ধ উৎস বন্ধ উৎস

ক্যাশের মূল্য ইনপুট টোকেনের জন্য প্রযোজ্য। পড়ার সময় ক্যাশ করা প্রম্পট আবার ব্যবহার হয়; লেখার সময় সেগুলি সংরক্ষিত হয় এবং বাড়তি খরচ হতে পারে। আউটপুট টোকেনের জন্য আউটপুট মূল্য প্রযোজ্য।

মডেল জেনারেশন শোকেস

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#360 Mercury 2

none
খরচ
$0.002
সময়
1.8s
টোকেন
1,514 tok

#356 KAT Coder AIR V2.5

default
খরচ
$0.002
সময়
14.5s
টোকেন
2,619 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
KAT Coder AIR V2.5 3.3 9.6 0.0% 0 14.31s 6,472 2,032 14,886

তুলনার জুটি বদলান