নেভিগেশন
AI BENCHY
Advertise here

Inception: Mercury 2 vs xAI: Grok 4.20

Grok 4.20 (medium) average score-এ এগিয়ে: 7.1 vs 7.0. Mercury 2 (medium)-এর benchmark খরচ কম: $0.093 vs $0.777. Mercury 2 (medium) দ্রুত: 2.72s vs 29.47s, pass rates 51.5% vs 63.6%.

প্রস্তাবিত মডেলMercury 2 (medium)Its score stays close to the best score here (7.0 vs 7.1), while costing about 8.4x less than Grok 4.20 (medium).

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-07-18

মেট্রিক Mercury 2 Mercury 2 medium প্রকাশ: 2026-02-24 Grok 4.20 Grok 4.20 medium প্রকাশ: 2026-03-31
স্কোর 7.0 7.1
র‍্যাঙ্ক #77 #74
নির্ভরযোগ্যতা 10.0 10.0
ধারাবাহিকতা 8.8 8.5
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 51.5% 63.6%
অস্থির টেস্ট 3 4
মোট রান 66 66
প্রতি ফলাফলে খরচ 0.928 9.709
মোট খরচ $0.093 $0.777
ইনপুট মূল্য $0.250 / 1M $1.250 / 1M
আউটপুট মূল্য $0.750 / 1M $2.500 / 1M
মোট ইনপুট টোকেন 109,572 102,791
আউটপুট টোকেন 10,313 5,363
রিজনিং টোকেন 76,806 253,977
প্রতিক্রিয়া সময় (গড়) 2.72s 29.47s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 14.63s 199.66s
প্রতিক্রিয়া সময় (মোট) 57.12s 648.35s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#77 Mercury 2

medium
খরচ
$0.002
সময়
2.1s
টোকেন
1,702 tok

#74 xAI: Grok 4.20

medium
খরচ
$0.041
সময়
110.3s
টোকেন
16,336 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
Mercury 2 8.2 7.7 77.8% 1 2.04s 7,065 296 11,328
Grok 4.20 6.3 6.6 55.6% 1 109.93s 8,307 268 103,150

দ্রুত তুলনা

তুলনার জুটি বদলান