AI BENCHY
Advertise here
#53

MiMo-V2.5

Xiaomi প্রকাশ: 2026-04-22 পরীক্ষিত হয়েছে: 2026-05-22 12:59 xiaomi/mimo-v2.5::medium
310B মোট (15B সক্রিয়)MoEউন্মুক্ত উৎস
(medium) (none)

সারাংশ

MiMo-V2.5 AI BENCHY-তে 7.4 স্কোর করে এবং #53 স্থানে আছে। এর reliability 10.0, pass rate 70.0%, মোট খরচ $0.346, এবং গড় response time 20.40s.

MiMo-V2.5 কে আলাদা করে যা: এই score range-এর জন্য মোট benchmark খরচ অস্বাভাবিকভাবে কম।

মডেলের তথ্য

গবেষণার তারিখ: 2026-08-12

প্রকাশিত
প্যারামিটার
310B মোট (15B সক্রিয়)
আর্কিটেকচার
MoE
উপলভ্যতা
উন্মুক্ত উৎস
লাইসেন্স
MIT

ধারাবাহিকতা

8.4

মোট আউটপুট টোকেন

164,736

মোট ইনপুট টোকেন

0

ইনপুট মূল্য

$0.400 / 1M

আউটপুট মূল্য

$2.000 / 1M

সঠিক টেস্ট

ভুল টেস্ট: 8

প্রতি চেষ্টায় পাস রেট: 70.0%

অস্থির টেস্ট

4

অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।

প্রতিক্রিয়া সময় (গড়)

20.40s

প্রতিক্রিয়া সময় (সর্বোচ্চ): 97.49s

প্রতিক্রিয়া সময় (মোট): 407.98s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#53 MiMo-V2.5

medium
খরচ
$0.002
সময়
54.8s
টোকেন
5,247 tok

রান ইতিহাস

পরীক্ষিত হয়েছে স্কোর নির্ভরযোগ্যতা সঠিক টেস্ট মোট খরচ তুলনা করুন
2026-08-14 02:41 পুনরায় পরীক্ষা 6.4 10.0 $0.104 তুলনা করুন
2026-07-16 22:46 নতুন টেস্ট যোগ হয়েছে 6.5 10.0 $0.082 তুলনা করুন
2026-06-04 13:56 নতুন টেস্ট যোগ হয়েছে 7.3 10.0 $0.063 তুলনা করুন
2026-05-22 12:59 নতুন টেস্ট যোগ হয়েছে 7.4 10.0 $0.346 বর্তমান রান
2026-05-08 15:28 স্যুইট পরিবর্তিত হয়েছে 7.8 10.0 $0.253 তুলনা করুন
2026-04-22 22:54 প্রথম নথিভুক্ত রান 7.8 প্রযোজ্য নয় $0.253 তুলনা করুন

এই রানটি ভিন্ন একটি বেঞ্চমার্ক স্যুইট ব্যবহার করেছে। ঐতিহাসিক পরিবর্তন পড়ার সময় স্যুইট পরিবর্তনও মাথায় রাখুন।

রান তুলনা

রানবেঞ্চমার্ক কভারেজস্কোরধারাবাহিকতানির্ভরযোগ্যতাসঠিক টেস্টঅস্থির টেস্টমোট আউটপুট টোকেনমোট ইনপুট টোকেনমোট খরচপ্রতিক্রিয়া সময় (গড়)
2026-05-22 12:59 · নতুন টেস্ট যোগ হয়েছে60/60 প্রচেষ্টা7.48.410.012/204164,7360$0.34620.40s
2026-05-08 15:28 · স্যুইট পরিবর্তিত হয়েছে54/54 প্রচেষ্টা7.88.610.012/183119,0280$0.25314.40s
পার্থক্য-0.4-0.20.00+1+457080+$0.094+5999ms

বেঞ্চমার্ক কভারেজ আলাদা: 60/60 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 54/54 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।

এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।

চার্ট

প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

দ্রুত তুলনা

বিভাগভিত্তিক বিশ্লেষণ

বিভাগ স্কোর ধারাবাহিকতা সঠিক টেস্ট
অ্যান্টি-এআই কৌশল 10.0 10.0
কোডিং 6.9 6.2
সমন্বিত 10.0 10.0
ডেটা পার্সিং ও নিষ্কাশন 2.7 5.7
ডোমেইন-নির্দিষ্ট 5.3 10.0
Sadharon Buddhimotta 5.4 2.5
নির্দেশনা অনুসরণ 9.9 10.0
ধাঁধা সমাধান 8.2 7.2
টুল কলিং 10.0 10.0
সাধারণ জ্ঞান 3.0 10.0

তুলনা করা মডেল