AI BENCHY
Advertise here
#44

Seed-2.0-Mini

Bytedance Seed প্রকাশ: 2026-02-14 পরীক্ষিত হয়েছে: 2026-04-11 01:44 bytedance-seed/seed-2.0-mini::medium
~50B মোট (~5B সক্রিয়)MoEবন্ধ উৎসআনুমানিক

সারাংশ

Seed-2.0-Mini AI BENCHY-তে 7.5 স্কোর করে এবং #44 স্থানে আছে। এর reliability প্রযোজ্য নয়, pass rate 66.7%, মোট খরচ $0.037, এবং গড় response time 69.70s.

Seed-2.0-Mini কে আলাদা করে যা: এটি নির্দেশনা অনুসরণ-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #1; আর অ্যান্টি-এআই কৌশল এর দুর্বলতম ক্ষেত্র, rank #17. এই score range-এর জন্য মোট benchmark খরচ অস্বাভাবিকভাবে কম।

মডেলের তথ্য

গবেষণার তারিখ: 2026-08-12

আনুমানিক
প্যারামিটার
~50B মোট (~5B সক্রিয়)
আর্কিটেকচার
MoE
উপলভ্যতা
বন্ধ উৎস
লাইসেন্স
-

সর্বজনীন তথ্যপ্রমাণের ভিত্তিতে সেরা অনুমান; প্রদানকারী সব মান প্রকাশ করেনি।

ধারাবাহিকতা

9.2

নির্ভরযোগ্যতা

প্রযোজ্য নয়

মোট আউটপুট টোকেন

81,657

মোট ইনপুট টোকেন

0

ইনপুট মূল্য

$0.100 / 1M

আউটপুট মূল্য

$0.400 / 1M

সঠিক টেস্ট

ভুল টেস্ট: 7

প্রতি চেষ্টায় পাস রেট: 66.7%

অস্থির টেস্ট

2

অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।

প্রতিক্রিয়া সময় (গড়)

69.70s

প্রতিক্রিয়া সময় (সর্বোচ্চ): 262.83s

প্রতিক্রিয়া সময় (মোট): 1045.47s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#44 Seed-2.0-Mini

medium
খরচ
$0.002
সময়
161.7s
টোকেন
4,379 tok

রান ইতিহাস

পরীক্ষিত হয়েছে স্কোর নির্ভরযোগ্যতা সঠিক টেস্ট মোট খরচ তুলনা করুন
2026-08-14 03:01 পুনরায় পরীক্ষা 7.0 8.7 $0.116 তুলনা করুন
2026-07-16 23:23 নতুন টেস্ট যোগ হয়েছে 7.0 8.5 $0.101 তুলনা করুন
2026-06-04 14:36 নতুন টেস্ট যোগ হয়েছে 6.9 6.7 $0.044 তুলনা করুন
2026-05-22 00:44 স্যুইট পরিবর্তিত হয়েছে 7.1 5.0 $0.044 তুলনা করুন
2026-04-11 01:44 প্রথম নথিভুক্ত রান 7.5 প্রযোজ্য নয় $0.037 বর্তমান রান

রান তুলনা

রানবেঞ্চমার্ক কভারেজস্কোরধারাবাহিকতানির্ভরযোগ্যতাসঠিক টেস্টঅস্থির টেস্টমোট আউটপুট টোকেনমোট ইনপুট টোকেনমোট খরচপ্রতিক্রিয়া সময় (গড়)
2026-04-11 01:44 · প্রথম নথিভুক্ত রান54/54 প্রচেষ্টা7.59.2প্রযোজ্য নয়11/18281,6570$0.03769.70s
2026-07-16 23:23 · নতুন টেস্ট যোগ হয়েছে66/66 প্রচেষ্টা7.08.98.511/223220,634125,467$0.10192.53s
পার্থক্য+0.5+0.30-1-138977-125467-$0.065-22830ms

বেঞ্চমার্ক কভারেজ আলাদা: 54/54 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 66/66 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।

এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।

চার্ট

প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

দ্রুত তুলনা

বিভাগভিত্তিক বিশ্লেষণ

বিভাগ স্কোর ধারাবাহিকতা সঠিক টেস্ট
অ্যান্টি-এআই কৌশল 6.6 10.0
কোডিং 10.0 10.0
সমন্বিত 10.0 10.0
ডেটা পার্সিং ও নিষ্কাশন 10.0 10.0
ডোমেইন-নির্দিষ্ট 3.0 10.0
Sadharon Buddhimotta 5.1 3.4
নির্দেশনা অনুসরণ 10.0 10.0
ধাঁধা সমাধান 8.2 7.2
টুল কলিং 10.0 10.0

তুলনা করা মডেল