AI BENCHY
Advertise here
#26

Qwen3.5-27B

Qwen প্রকাশ: 2026-02-24 পরীক্ষিত হয়েছে: 2026-05-22 00:04 qwen/qwen3.5-27b::medium
27Bঘনউন্মুক্ত উৎস
(medium) (none)

সারাংশ

Qwen3.5-27B AI BENCHY-তে 7.9 স্কোর করে এবং #26 স্থানে আছে। এর reliability 10.0, pass rate 73.3%, মোট খরচ $0.607, এবং গড় response time 60.85s.

Qwen3.5-27B কে আলাদা করে যা: এটি ডোমেইন-নির্দিষ্ট-তে সবচেয়ে ভালোভাবে নজর কাড়ে, যেখানে এর rank #4; আর কোডিং এর দুর্বলতম ক্ষেত্র, rank #18.

মডেলের তথ্য

গবেষণার তারিখ: 2026-08-12

প্রকাশিত
প্যারামিটার
27B
আর্কিটেকচার
ঘন
উপলভ্যতা
উন্মুক্ত উৎস
লাইসেন্স
Apache-2.0

ধারাবাহিকতা

8.9

মোট আউটপুট টোকেন

314,583

মোট ইনপুট টোকেন

0

ইনপুট মূল্য

$0.195 / 1M

আউটপুট মূল্য

$1.560 / 1M

সঠিক টেস্ট

ভুল টেস্ট: 7

প্রতি চেষ্টায় পাস রেট: 73.3%

অস্থির টেস্ট

3

অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।

প্রতিক্রিয়া সময় (গড়)

60.85s

প্রতিক্রিয়া সময় (সর্বোচ্চ): 177.36s

প্রতিক্রিয়া সময় (মোট): 1216.93s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#26 Qwen3.5-27B

medium
খরচ
$0.008
সময়
62.0s
টোকেন
3,099 tok

রান ইতিহাস

পরীক্ষিত হয়েছে স্কোর নির্ভরযোগ্যতা সঠিক টেস্ট মোট খরচ তুলনা করুন
2026-08-14 01:58 পুনরায় পরীক্ষা 7.5 10.0 $0.982 তুলনা করুন
2026-07-16 22:51 নতুন টেস্ট যোগ হয়েছে 7.4 10.0 $0.981 তুলনা করুন
2026-06-04 13:40 নতুন টেস্ট যোগ হয়েছে 7.8 10.0 $0.536 তুলনা করুন
2026-05-22 00:04 স্যুইট পরিবর্তিত হয়েছে 7.9 10.0 $0.607 বর্তমান রান
2026-04-11 01:44 প্রথম নথিভুক্ত রান 8.4 প্রযোজ্য নয় $0.497 তুলনা করুন

এই রানটি ভিন্ন একটি বেঞ্চমার্ক স্যুইট ব্যবহার করেছে। ঐতিহাসিক পরিবর্তন পড়ার সময় স্যুইট পরিবর্তনও মাথায় রাখুন।

রান তুলনা

রানবেঞ্চমার্ক কভারেজস্কোরধারাবাহিকতানির্ভরযোগ্যতাসঠিক টেস্টঅস্থির টেস্টমোট আউটপুট টোকেনমোট ইনপুট টোকেনমোট খরচপ্রতিক্রিয়া সময় (গড়)
2026-05-22 00:04 · স্যুইট পরিবর্তিত হয়েছে60/60 প্রচেষ্টা7.98.910.013/203314,5830$0.60760.85s
2026-04-11 01:44 · প্রথম নথিভুক্ত রান54/54 প্রচেষ্টা8.48.8প্রযোজ্য নয়13/183245,0000$0.49753.03s
পার্থক্য-0.5+0.100+695830+$0.110+7821ms

বেঞ্চমার্ক কভারেজ আলাদা: 60/60 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি) বনাম 54/54 প্রচেষ্টা (লক্ষ্য: প্রতি টেস্টে 3টি পুনরাবৃত্তি)। মোট মান ও পুনরাবৃত্তি-সংবেদনশীল মেট্রিক সরাসরি তুলনাযোগ্য নয়।

এই দুই রান ভিন্ন বেঞ্চমার্ক স্যুইট ব্যবহার করেছে, তাই পার্থক্যগুলোতে মডেল পরিবর্তন এবং স্যুইট পরিবর্তন দুটোই ধরা পড়ে।

চার্ট

প্রথম মডেলটি নির্বাচন করুন, তারপর দ্বিতীয় মডেলে ক্লিক করে পাশাপাশি তুলনা পৃষ্ঠা খুলুন।

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

দ্রুত তুলনা

বিভাগভিত্তিক বিশ্লেষণ

বিভাগ স্কোর ধারাবাহিকতা সঠিক টেস্ট
অ্যান্টি-এআই কৌশল 8.7 7.9
কোডিং 7.0 9.8
সমন্বিত 10.0 10.0
ডেটা পার্সিং ও নিষ্কাশন 10.0 10.0
ডোমেইন-নির্দিষ্ট 5.3 10.0
Sadharon Buddhimotta 6.1 3.1
নির্দেশনা অনুসরণ 10.0 10.0
ধাঁধা সমাধান 8.2 7.7
টুল কলিং 10.0 10.0
সাধারণ জ্ঞান 3.0 10.0

তুলনা করা মডেল