#15 Gemma 4 31B
medium- খরচ
- $0.002
- সময়
- 45.7s
- টোকেন
- 2,696 tok
সারাংশ
Gemma 4 31B AI BENCHY-তে 8.3 স্কোর করে এবং #15 স্থানে আছে। এর reliability প্রযোজ্য নয়, pass rate 79.6%, মোট খরচ $0.018, এবং গড় response time 24.88s.
Gemma 4 31B কে আলাদা করে যা: এটি ডোমেইন-নির্দিষ্ট-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #2; আর কোডিং এর দুর্বলতম ক্ষেত্র, rank #18. এই score range-এর জন্য মোট benchmark খরচ অস্বাভাবিকভাবে কম।
গবেষণার তারিখ: 2026-08-12
8.3
ধারাবাহিকতা
9.2
প্রযোজ্য নয়
$0.018
মোট আউটপুট টোকেন
40,684
মোট ইনপুট টোকেন
0
ইনপুট মূল্য
$0.130 / 1M
আউটপুট মূল্য
$0.380 / 1M
অস্থির টেস্ট
2
অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।
24.88s
প্রতিক্রিয়া সময় (সর্বোচ্চ): 70.97s
প্রতিক্রিয়া সময় (মোট): 398.13s
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
রান ইতিহাস
| পরীক্ষিত হয়েছে | স্কোর | নির্ভরযোগ্যতা | সঠিক টেস্ট | মোট খরচ | তুলনা করুন |
|---|---|---|---|---|---|
| 2026-08-14 02:55 পুনরায় পরীক্ষা | 6.2 | 10.0 | $0.101 ↓ | তুলনা করুন | |
| 2026-07-16 23:24 নতুন টেস্ট যোগ হয়েছে | 6.3 | 10.0 | $0.163 ↑ | তুলনা করুন | |
| 2026-06-04 14:27 নতুন টেস্ট যোগ হয়েছে | 7.9 | 8.9 | $0.035 ↓ | তুলনা করুন | |
| 2026-05-22 00:35 স্যুইট পরিবর্তিত হয়েছে | 8.0 | 6.7 | $0.029 | তুলনা করুন | |
| 2026-04-14 00:56 প্রথম নথিভুক্ত রান | 8.3 | প্রযোজ্য নয় | $0.018 | বর্তমান রান |
রান তুলনা
| রান | বেঞ্চমার্ক কভারেজ | স্কোর | ধারাবাহিকতা | নির্ভরযোগ্যতা | সঠিক টেস্ট | অস্থির টেস্ট | মোট আউটপুট টোকেন | মোট ইনপুট টোকেন | মোট খরচ | প্রতিক্রিয়া সময় (গড়) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-14 00:56 · প্রথম নথিভুক্ত রান | 54/54 প্রচেষ্টা | 8.3 | 9.2 | প্রযোজ্য নয় | 13/18 | 2 | 40,684 | 0 | $0.018 | 24.88s |
| 2026-07-16 23:24 · নতুন টেস্ট যোগ হয়েছে | 66/66 প্রচেষ্টা | 6.3 | 9.0 | 10.0 | 14/22 | 2 | 257,746 | 94,992 | $0.163 | 75.38s |
| পার্থক্য | — | +2.0 | +0.2 | -1 | 0 | -217062 | -94992 | -$0.145 | -50493ms |
বেঞ্চমার্ক কভারেজ আলাদা: 54/54 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 66/66 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।
এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।
প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।
| বিভাগ | স্কোর | ধারাবাহিকতা | সঠিক টেস্ট |
|---|---|---|---|
| অ্যান্টি-এআই কৌশল | 10.0 | 10.0 | |
| কোডিং | 4.7 | 1.6 | |
| সমন্বিত | 3.0 | 10.0 | |
| ডেটা পার্সিং ও নিষ্কাশন | 10.0 | 10.0 | |
| ডোমেইন-নির্দিষ্ট | 7.7 | 10.0 | |
| Sadharon Buddhimotta | 10.0 | 10.0 | |
| নির্দেশনা অনুসরণ | 10.0 | 10.0 | |
| ধাঁধা সমাধান | 8.8 | 7.9 | |
| টুল কলিং | 3.0 | 10.0 |