নেভিগেশন
Advertise here

ERNIE-Light-DT-1.0 (low) vs Mercury 2.5 (medium)

average score প্রায় সমান: 6.4 vs 6.4. Mercury 2.5 (medium)-এর benchmark খরচ কম: $0.034 vs $0.489. Mercury 2.5 (medium) দ্রুত: 7.74s vs 8.91s, pass rates 65.2% vs 63.8%.

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-11-13

তুলনা করা মডেল

র‍্যাঙ্ক
#288
মোট আউটপুট টোকেন
43,895
প্রতিক্রিয়া সময় (গড়)
8.91s
মোট খরচ
$0.489
র‍্যাঙ্ক
#286
মোট আউটপুট টোকেন
138,946
প্রতিক্রিয়া সময় (গড়)
7.74s
মোট খরচ
$0.034
প্রস্তাবিত মডেল Mercury 2.5 (medium)

It has the best score here (6.4), while costing about 14.6x less than ERNIE-Light-DT-1.0 (low).

বিস্তারিত তুলনা

মেট্রিক ERNIE-Light-DT-1.0 ERNIE-Light-DT-1.0 low প্রকাশ: 2026-11-12 Mercury 2.5 Mercury 2.5 medium প্রকাশ: 2026-09-08
স্কোর 6.4 6.4
র‍্যাঙ্ক #288 #286
নির্ভরযোগ্যতা 9.3 9.7
ধারাবাহিকতা 7.0 8.3
প্রচেষ্টা 69/69 69/69
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 65.2% 63.8%
অস্থির টেস্ট 9 5
মোট রান 69 69
প্রতি ফলাফলে খরচ 4.441 0.280
মোট খরচ $0.489 $0.034
ইনপুট মূল্য $1.130 / 1M $0.040 / 1M
আউটপুট মূল্য $3.941 / 1M $0.150 / 1M
ক্যাশ পড়ার মূল্য $0.113 / 1M $0.004 / 1M
ক্যাশ লেখার মূল্য প্রযোজ্য নয় প্রযোজ্য নয়
মোট ইনপুট টোকেন 279,234 317,982
আউটপুট টোকেন 13,328 3,918
রিজনিং টোকেন 30,567 135,028
প্রতিক্রিয়া সময় (গড়) 8.91s 7.74s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 96.92s 107.89s
প্রতিক্রিয়া সময় (মোট) 204.98s 178.07s
প্যারামিটার ~320B মোট (~18B সক্রিয়) ~100B
উপলভ্যতা বন্ধ উৎস বন্ধ উৎস

ক্যাশের মূল্য ইনপুট টোকেনের জন্য প্রযোজ্য। পড়ার সময় ক্যাশ করা প্রম্পট আবার ব্যবহার হয়; লেখার সময় সেগুলি সংরক্ষিত হয় এবং বাড়তি খরচ হতে পারে। আউটপুট টোকেনের জন্য আউটপুট মূল্য প্রযোজ্য।

মডেল জেনারেশন শোকেস

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 ERNIE-Light-DT-1.0

low
খরচ
$0.005
সময়
7.7s
টোকেন
1,177 tok

#286 Mercury 2.5

medium
খরচ
$0.001
সময়
3.8s
টোকেন
3,386 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
ERNIE-Light-DT-1.0 5.7 4.8 55.6% 2 5.33s 7,317 468 4,231
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857

তুলনার জুটি বদলান