- স্কোর
- 8.6 (+1.10 পয়েন্ট)
- মোট খরচ (বর্তমান মূল্য)
- $0.061 · 95.8% সস্তা
- প্রতিক্রিয়া সময় (গড়)
- 7.51s · 94.0% দ্রুত
সারাংশ
Seed-2.0-Code AI BENCHY-তে 7.5 স্কোর করে এবং #177 স্থানে আছে। এর reliability 9.0, pass rate 65.2%, মোট খরচ $1.448, এবং গড় response time 124.87s.
Seed-2.0-Code কে আলাদা করে যা: এটি ডেটা পার্সিং ও নিষ্কাশন-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #1; আর Sadharon Buddhimotta এর দুর্বলতম ক্ষেত্র, rank #14.
প্রস্তাবিত বিকল্প
এর বদলে এই মডেলগুলির একটি বেছে নেওয়ার পরামর্শ দিই:
- স্কোর
- 9.4 (+1.89 পয়েন্ট)
- মোট খরচ (বর্তমান মূল্য)
- $0.183 · 87.4% সস্তা
- প্রতিক্রিয়া সময় (গড়)
- 6.24s · 95.0% দ্রুত
- স্কোর
- 8.3 (+0.79 পয়েন্ট)
- মোট খরচ (বর্তমান মূল্য)
- $0.047 · 96.8% সস্তা
- প্রতিক্রিয়া সময় (গড়)
- 18.07s · 85.5% দ্রুত
মডেলের তথ্য
গবেষণার তারিখ: 2026-08-12
- প্যারামিটার
- ~200B মোট (~20B সক্রিয়)
- আর্কিটেকচার
- MoE
- উপলভ্যতা
- বন্ধ উৎস
- লাইসেন্স
- -
সর্বজনীন তথ্যপ্রমাণের ভিত্তিতে সেরা অনুমান; প্রদানকারী সব মান প্রকাশ করেনি।
7.5
ধারাবাহিকতা
7.9
$1.448
মোট আউটপুট টোকেন
432,850
মোট ইনপুট টোকেন
297,321
ইনপুট মূল্য
$0.500 / 1M
আউটপুট মূল্য
$3.000 / 1M
ক্যাশ পড়ার মূল্য
প্রযোজ্য নয়
ক্যাশ লেখার মূল্য
প্রযোজ্য নয়
ক্যাশের মূল্য ইনপুট টোকেনের জন্য প্রযোজ্য। পড়ার সময় ক্যাশ করা প্রম্পট আবার ব্যবহার হয়; লেখার সময় সেগুলি সংরক্ষিত হয় এবং বাড়তি খরচ হতে পারে। আউটপুট টোকেনের জন্য আউটপুট মূল্য প্রযোজ্য।
অস্থির টেস্ট
5
অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।
124.87s
প্রতিক্রিয়া সময় (সর্বোচ্চ): 675.30s
প্রতিক্রিয়া সময় (মোট): 2871.96s
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#177 Seed-2.0-Code
high- খরচ
- $0.037
- সময়
- 183.6s
- টোকেন
- 12,388 tok
রান ইতিহাস
| পরীক্ষিত হয়েছে | স্কোর | নির্ভরযোগ্যতা | সঠিক টেস্ট | মোট খরচ | তুলনা করুন |
|---|---|---|---|---|---|
| 2026-10-01 04:14 পুনরায় পরীক্ষা | 7.5 | 9.0 | $1.448 | বর্তমান রান | |
| 2026-08-12 23:09 প্রথম রান | 6.9 | 6.0 | $1.312 | তুলনা করুন |
এই রানটি ভিন্ন একটি বেঞ্চমার্ক স্যুইট ব্যবহার করেছে। ঐতিহাসিক পরিবর্তন পড়ার সময় স্যুইট পরিবর্তনও মাথায় রাখুন।
রান তুলনা
| রান | বেঞ্চমার্ক কভারেজ | স্কোর | ধারাবাহিকতা | নির্ভরযোগ্যতা | সঠিক টেস্ট | অস্থির টেস্ট | মোট আউটপুট টোকেন | মোট ইনপুট টোকেন | মোট খরচ | প্রতিক্রিয়া সময় (গড়) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 04:14 · বর্তমান রান | 69/69 প্রচেষ্টা | 7.5 | 7.9 | 9.0 | 12/23 | 5 | 432,850 | 297,321 | $1.448 | 124.87s |
| 2026-08-12 23:09 · প্রথম রান | 66/66 প্রচেষ্টা | 6.9 | 7.0 | 6.0 | 11/22 | 8 | 423,424 | 81,961 | $1.312 | 127.79s |
| পার্থক্য | — | +0.6 | +0.9 | +3.0 | +1 | -3 | +9426 | +215360 | +$0.136 | -2917ms |
বেঞ্চমার্ক কভারেজ আলাদা: 69/69 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 66/66 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।
এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।
চার্ট
প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।
স্কোর অনুযায়ী শীর্ষ মডেল
স্কোর vs মোট খরচ
প্রতিক্রিয়া সময় (গড়)
স্কোর vs প্রতিক্রিয়া সময় (গড়)
মোট আউটপুট টোকেন
স্কোর vs মোট আউটপুট টোকেন
দ্রুত তুলনা
বিভাগভিত্তিক বিশ্লেষণ
| বিভাগ | স্কোর | ধারাবাহিকতা | সঠিক টেস্ট |
|---|---|---|---|
| স্বায়ত্তশাসিত এজেন্টের কাজ | 10.0 | 10.0 | |
| অ্যান্টি-এআই কৌশল | 8.3 | 10.0 | |
| কোডিং | 6.2 | 6.5 | |
| সমন্বিত | 7.3 | 5.8 | |
| ডেটা পার্সিং ও নিষ্কাশন | 10.0 | 10.0 | |
| ডোমেইন-নির্দিষ্ট | 3.5 | 4.4 | |
| Sadharon Buddhimotta | 4.6 | 7.8 | |
| নির্দেশনা অনুসরণ | 9.8 | 10.0 | |
| ধাঁধা সমাধান | 7.8 | 9.3 | |
| টুল কলিং | 4.7 | 1.6 | |
| সাধারণ জ্ঞান | 3.0 | 10.0 |