AI BENCHY
Advertise here
#108

KAT-Coder-Pro V2.5

Kwaipilot প্রকাশ: 2026-07-14 পরীক্ষিত হয়েছে: 2026-08-14 03:25 kwaipilot/kat-coder-pro-v2.5::high
~700B মোট (~72B সক্রিয়)MoEবন্ধ উৎসআনুমানিক

সারাংশ

KAT-Coder-Pro V2.5 AI BENCHY-তে 7.2 স্কোর করে এবং #108 স্থানে আছে। এর reliability 10.0, pass rate 63.6%, মোট খরচ $0.506, এবং গড় response time 22.11s.

KAT-Coder-Pro V2.5 কে আলাদা করে যা: এটি সমন্বিত-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #3; আর ডোমেইন-নির্দিষ্ট এর দুর্বলতম ক্ষেত্র, rank #16.

মডেলের তথ্য

গবেষণার তারিখ: 2026-08-12

আনুমানিক
প্যারামিটার
~700B মোট (~72B সক্রিয়)
আর্কিটেকচার
MoE
উপলভ্যতা
বন্ধ উৎস
লাইসেন্স
-

সর্বজনীন তথ্যপ্রমাণের ভিত্তিতে সেরা অনুমান; প্রদানকারী সব মান প্রকাশ করেনি।

ধারাবাহিকতা

7.8

মোট আউটপুট টোকেন

144,359

মোট ইনপুট টোকেন

106,085

ইনপুট মূল্য

$0.740 / 1M

আউটপুট মূল্য

$2.960 / 1M

সঠিক টেস্ট

ভুল টেস্ট: 11

প্রতি চেষ্টায় পাস রেট: 63.6%

অস্থির টেস্ট

6

অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।

প্রতিক্রিয়া সময় (গড়)

22.11s

প্রতিক্রিয়া সময় (সর্বোচ্চ): 199.97s

প্রতিক্রিয়া সময় (মোট): 486.31s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#108 KAT-Coder-Pro V2.5

high
খরচ
$0.009
সময়
26.4s
টোকেন
3,117 tok

রান ইতিহাস

পরীক্ষিত হয়েছে স্কোর নির্ভরযোগ্যতা সঠিক টেস্ট মোট খরচ তুলনা করুন
2026-08-14 03:25 পুনরায় পরীক্ষা 7.2 10.0 $0.506 বর্তমান রান
2026-07-16 23:38 নতুন টেস্ট যোগ হয়েছে 7.2 10.0 $0.482 তুলনা করুন
2026-07-14 11:05 প্রথম রান 7.7 10.0 $0.246 তুলনা করুন

এই রানটি ভিন্ন একটি বেঞ্চমার্ক স্যুইট ব্যবহার করেছে। ঐতিহাসিক পরিবর্তন পড়ার সময় স্যুইট পরিবর্তনও মাথায় রাখুন।

রান তুলনা

রানবেঞ্চমার্ক কভারেজস্কোরধারাবাহিকতানির্ভরযোগ্যতাসঠিক টেস্টঅস্থির টেস্টমোট আউটপুট টোকেনমোট ইনপুট টোকেনমোট খরচপ্রতিক্রিয়া সময় (গড়)
2026-08-14 03:25 · বর্তমান রান66/66 প্রচেষ্টা7.27.810.011/226144,359106,085$0.50622.11s
2026-07-16 23:38 · নতুন টেস্ট যোগ হয়েছে66/66 প্রচেষ্টা7.27.810.011/226136,164106,076$0.48220.83s
পার্থক্য0.00.00.000+8195+9+$0.025+1273ms

এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।

মূল্যের ইতিহাস

OpenRouter থেকে এই মডেলের ঐতিহাসিক মূল্য তথ্য।

তারিখ ইনপুট মূল্য আউটপুট মূল্য
2026-08-14 12:51 $0.740 / 1M $2.960 / 1M

চার্ট

প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

দ্রুত তুলনা

বিভাগভিত্তিক বিশ্লেষণ

বিভাগ স্কোর ধারাবাহিকতা সঠিক টেস্ট
অ্যান্টি-এআই কৌশল 7.0 8.0
কোডিং 6.4 7.9
সমন্বিত 7.3 5.8
ডেটা পার্সিং ও নিষ্কাশন 10.0 10.0
ডোমেইন-নির্দিষ্ট 2.9 4.4
Sadharon Buddhimotta 5.1 10.0
নির্দেশনা অনুসরণ 9.9 10.0
ধাঁধা সমাধান 8.2 7.2
টুল কলিং 10.0 10.0
সাধারণ জ্ঞান 3.0 10.0

তুলনা করা মডেল