AI BENCHY
Advertise here
#15

Gemma 4 31B

Google প্রকাশ: 2026-04-02 পরীক্ষিত হয়েছে: 2026-04-14 00:56 google/gemma-4-31b-it::medium
30.7Bঘনউন্মুক্ত উৎস
(medium) (none)

সারাংশ

Gemma 4 31B AI BENCHY-তে 8.3 স্কোর করে এবং #15 স্থানে আছে। এর reliability প্রযোজ্য নয়, pass rate 79.6%, মোট খরচ $0.018, এবং গড় response time 24.88s.

Gemma 4 31B কে আলাদা করে যা: এটি ডোমেইন-নির্দিষ্ট-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #2; আর কোডিং এর দুর্বলতম ক্ষেত্র, rank #18. এই score range-এর জন্য মোট benchmark খরচ অস্বাভাবিকভাবে কম।

মডেলের তথ্য

গবেষণার তারিখ: 2026-08-12

প্রকাশিত
প্যারামিটার
30.7B
আর্কিটেকচার
ঘন
উপলভ্যতা
উন্মুক্ত উৎস
লাইসেন্স
Apache-2.0

ধারাবাহিকতা

9.2

নির্ভরযোগ্যতা

প্রযোজ্য নয়

মোট আউটপুট টোকেন

40,684

মোট ইনপুট টোকেন

0

ইনপুট মূল্য

$0.130 / 1M

আউটপুট মূল্য

$0.380 / 1M

সঠিক টেস্ট

ভুল টেস্ট: 5

প্রতি চেষ্টায় পাস রেট: 79.6%

অস্থির টেস্ট

2

অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।

প্রতিক্রিয়া সময় (গড়)

24.88s

প্রতিক্রিয়া সময় (সর্বোচ্চ): 70.97s

প্রতিক্রিয়া সময় (মোট): 398.13s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#15 Gemma 4 31B

medium
খরচ
$0.002
সময়
45.7s
টোকেন
2,696 tok

রান ইতিহাস

পরীক্ষিত হয়েছে স্কোর নির্ভরযোগ্যতা সঠিক টেস্ট মোট খরচ তুলনা করুন
2026-08-14 02:55 পুনরায় পরীক্ষা 6.2 10.0 $0.101 তুলনা করুন
2026-07-16 23:24 নতুন টেস্ট যোগ হয়েছে 6.3 10.0 $0.163 তুলনা করুন
2026-06-04 14:27 নতুন টেস্ট যোগ হয়েছে 7.9 8.9 $0.035 তুলনা করুন
2026-05-22 00:35 স্যুইট পরিবর্তিত হয়েছে 8.0 6.7 $0.029 তুলনা করুন
2026-04-14 00:56 প্রথম নথিভুক্ত রান 8.3 প্রযোজ্য নয় $0.018 বর্তমান রান

রান তুলনা

রানবেঞ্চমার্ক কভারেজস্কোরধারাবাহিকতানির্ভরযোগ্যতাসঠিক টেস্টঅস্থির টেস্টমোট আউটপুট টোকেনমোট ইনপুট টোকেনমোট খরচপ্রতিক্রিয়া সময় (গড়)
2026-04-14 00:56 · প্রথম নথিভুক্ত রান54/54 প্রচেষ্টা8.39.2প্রযোজ্য নয়13/18240,6840$0.01824.88s
2026-05-22 00:35 · স্যুইট পরিবর্তিত হয়েছে60/60 প্রচেষ্টা8.09.26.714/20269,2910$0.02935.51s
পার্থক্য+0.40.0-10-286070-$0.012-10626ms

বেঞ্চমার্ক কভারেজ আলাদা: 54/54 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 60/60 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।

এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।

চার্ট

প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

দ্রুত তুলনা

বিভাগভিত্তিক বিশ্লেষণ

বিভাগ স্কোর ধারাবাহিকতা সঠিক টেস্ট
অ্যান্টি-এআই কৌশল 10.0 10.0
কোডিং 4.7 1.6
সমন্বিত 3.0 10.0
ডেটা পার্সিং ও নিষ্কাশন 10.0 10.0
ডোমেইন-নির্দিষ্ট 7.7 10.0
Sadharon Buddhimotta 10.0 10.0
নির্দেশনা অনুসরণ 10.0 10.0
ধাঁধা সমাধান 8.8 7.9
টুল কলিং 3.0 10.0

তুলনা করা মডেল