AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#48

Gemma 4 26B A4B

Google প্রকাশ: 2026-04-03 পরীক্ষিত হয়েছে: 2026-05-22 00:42 google/gemma-4-26b-a4b-it::medium
25.2B মোট (3.8B সক্রিয়)MoEউন্মুক্ত উৎস
(medium) (none)

সারাংশ

Gemma 4 26B A4B AI BENCHY-তে 7.5 স্কোর করে এবং #48 স্থানে আছে। এর reliability 10.0, pass rate 70.0%, মোট খরচ $0.045, এবং গড় response time 51.35s.

Gemma 4 26B A4B কে আলাদা করে যা: এটি নির্দেশনা অনুসরণ-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #1; আর কোডিং এর দুর্বলতম ক্ষেত্র, rank #18. এই score range-এর জন্য মোট benchmark খরচ অস্বাভাবিকভাবে কম।

মডেলের তথ্য

গবেষণার তারিখ: 2026-08-12

প্রকাশিত
প্যারামিটার
25.2B মোট (3.8B সক্রিয়)
আর্কিটেকচার
MoE
উপলভ্যতা
উন্মুক্ত উৎস
লাইসেন্স
Apache-2.0

ধারাবাহিকতা

8.8

মোট আউটপুট টোকেন

111,029

মোট ইনপুট টোকেন

0

ইনপুট মূল্য

$0.060 / 1M

আউটপুট মূল্য

$0.330 / 1M

সঠিক টেস্ট

ভুল টেস্ট: 7

প্রতি চেষ্টায় পাস রেট: 70.0%

অস্থির টেস্ট

3

অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।

প্রতিক্রিয়া সময় (গড়)

51.35s

প্রতিক্রিয়া সময় (সর্বোচ্চ): 369.32s

প্রতিক্রিয়া সময় (মোট): 975.67s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#48 Gemma 4 26B A4B

medium
অবৈধ SVG
খরচ
$0.000
সময়
300.0s
টোকেন
0 tok

রান ইতিহাস

পরীক্ষিত হয়েছে স্কোর নির্ভরযোগ্যতা সঠিক টেস্ট মোট খরচ তুলনা করুন
2026-08-14 02:53 পুনরায় পরীক্ষা 6.8 10.0 $0.111 তুলনা করুন
2026-07-16 23:43 নতুন টেস্ট যোগ হয়েছে 6.6 9.4 $0.082 তুলনা করুন
2026-06-04 14:22 নতুন টেস্ট যোগ হয়েছে 7.6 8.9 $0.045 তুলনা করুন
2026-05-22 00:42 স্যুইট পরিবর্তিত হয়েছে 7.5 10.0 $0.045 বর্তমান রান
2026-04-22 21:39 প্রথম নথিভুক্ত রান 8.0 প্রযোজ্য নয় $0.028 তুলনা করুন

এই রানটি ভিন্ন একটি বেঞ্চমার্ক স্যুইট ব্যবহার করেছে। ঐতিহাসিক পরিবর্তন পড়ার সময় স্যুইট পরিবর্তনও মাথায় রাখুন।

রান তুলনা

রানবেঞ্চমার্ক কভারেজস্কোরধারাবাহিকতানির্ভরযোগ্যতাসঠিক টেস্টঅস্থির টেস্টমোট আউটপুট টোকেনমোট ইনপুট টোকেনমোট খরচপ্রতিক্রিয়া সময় (গড়)
2026-05-22 00:42 · স্যুইট পরিবর্তিত হয়েছে60/60 প্রচেষ্টা7.58.810.013/203111,0290$0.04551.35s
2026-07-16 23:43 · নতুন টেস্ট যোগ হয়েছে66/66 প্রচেষ্টা6.69.29.414/222247,52777,550$0.082103.83s
পার্থক্য+0.9-0.4+0.6-1+1-136498-77550-$0.037-52481ms

বেঞ্চমার্ক কভারেজ আলাদা: 60/60 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 66/66 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।

এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।

চার্ট

প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

দ্রুত তুলনা

বিভাগভিত্তিক বিশ্লেষণ

বিভাগ স্কোর ধারাবাহিকতা সঠিক টেস্ট
অ্যান্টি-এআই কৌশল 10.0 10.0
কোডিং 2.9 10.0
সমন্বিত 9.6 10.0
ডেটা পার্সিং ও নিষ্কাশন 10.0 10.0
ডোমেইন-নির্দিষ্ট 2.9 4.4
Sadharon Buddhimotta 10.0 10.0
নির্দেশনা অনুসরণ 10.0 10.0
ধাঁধা সমাধান 7.7 7.3
টুল কলিং 10.0 10.0
সাধারণ জ্ঞান 3.0 10.0

তুলনা করা মডেল