Nemotron 3 Ultra (medium) average score-এ এগিয়ে: 7.5 vs 6.9. MiMo-V2.5-Pro (medium)-এর benchmark খরচ কম: $0.187 vs $0.774. Nemotron 3 Ultra (medium) দ্রুত: 32.21s vs 33.92s, pass rates 68.2% vs 66.7%.
প্রস্তাবিত মডেলMiMo-V2.5-Pro (medium)Its score stays close to the best score here (6.9 vs 7.5), while costing about 4.1x less than Nemotron 3 Ultra (medium).
AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-07-21
9.8প্রথম প্রচেষ্টার সফলতা স্কোর: 10.0 মানে সফল কলের আগে লক্ষ্য API বা রেট-লিমিটের কোনো পুনরায় চেষ্টা-যোগ্য ব্যর্থতা নেই; ট্র্যাক করা ব্যর্থতা স্কোর কমায়।…
10.0প্রথম প্রচেষ্টার সফলতা স্কোর: 10.0 মানে সফল কলের আগে লক্ষ্য API বা রেট-লিমিটের কোনো পুনরায় চেষ্টা-যোগ্য ব্যর্থতা নেই; ট্র্যাক করা ব্যর্থতা স্কোর কমায়।…
ধারাবাহিকতা
8.5ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
8.2ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
সঠিক টেস্ট
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 7API ত্রুটি: 1অবৈধ টুল কল: 1প্রতিক্রিয়া সময় (গড়)32.21sপ্রতিক্রিয়া সময় (সর্বোচ্চ)392.56sপ্রতিক্রিয়া সময় (মোট)708.65sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)8.62sপ্রতিক্রিয়া সময় (সর্বোচ্চ)16.86sপ্রতিক্রিয়া সময় (মোট)34.49sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)3.26sপ্রতিক্রিয়া সময় (সর্বোচ্চ)6.38sপ্রতিক্রিয়া সময় (মোট)13.06sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
7.4ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
88.9%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)26.53sপ্রতিক্রিয়া সময় (সর্বোচ্চ)31.91sপ্রতিক্রিয়া সময় (মোট)79.58sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
4.7ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
66.7%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
2অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।API ত্রুটি: 1অতিরিক্ত ফরম্যাটিং: 1প্রতিক্রিয়া সময় (গড়)92.07sপ্রতিক্রিয়া সময় (সর্বোচ্চ)130.77sপ্রতিক্রিয়া সময় (মোট)276.20sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
5.8ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
66.7%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।অবৈধ টুল কল: 1প্রতিক্রিয়া সময় (গড়)218.25sপ্রতিক্রিয়া সময় (সর্বোচ্চ)392.56sপ্রতিক্রিয়া সময় (মোট)436.49sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
5.9ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
66.7%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।অবৈধ টুল কল: 1প্রতিক্রিয়া সময় (গড়)125.45sপ্রতিক্রিয়া সময় (সর্বোচ্চ)197.54sপ্রতিক্রিয়া সময় (মোট)250.89sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)5.68sপ্রতিক্রিয়া সময় (সর্বোচ্চ)7.94sপ্রতিক্রিয়া সময় (মোট)11.36sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
5.8ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
83.3%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)18.81sপ্রতিক্রিয়া সময় (সর্বোচ্চ)20.29sপ্রতিক্রিয়া সময় (মোট)37.61sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
4.4ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
33.3%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
2অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 3প্রতিক্রিয়া সময় (গড়)24.90sপ্রতিক্রিয়া সময় (সর্বোচ্চ)34.96sপ্রতিক্রিয়া সময় (মোট)74.71sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
33.3%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।অতিরিক্ত ফরম্যাটিং: 2প্রতিক্রিয়া সময় (গড়)37.87sপ্রতিক্রিয়া সময় (সর্বোচ্চ)84.22sপ্রতিক্রিয়া সময় (মোট)113.60sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
9.5ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।API ত্রুটি: 1প্রতিক্রিয়া সময় (গড়)2.52sপ্রতিক্রিয়া সময় (সর্বোচ্চ)2.52sপ্রতিক্রিয়া সময় (মোট)2.52sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।নির্দেশনা অনুসরণ করা হয়নি: 1প্রতিক্রিয়া সময় (গড়)4.02sপ্রতিক্রিয়া সময় (সর্বোচ্চ)4.02sপ্রতিক্রিয়া সময় (মোট)4.02sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)6.35sপ্রতিক্রিয়া সময় (সর্বোচ্চ)9.38sপ্রতিক্রিয়া সময় (মোট)12.69sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)2.77sপ্রতিক্রিয়া সময় (সর্বোচ্চ)3.21sপ্রতিক্রিয়া সময় (মোট)5.54sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
9.9ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
33.3%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 2প্রতিক্রিয়া সময় (গড়)3.54sপ্রতিক্রিয়া সময় (সর্বোচ্চ)6.03sপ্রতিক্রিয়া সময় (মোট)10.62sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
7.9ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
55.6%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।নির্দেশনা অনুসরণ করা হয়নি: 1ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)5.31sপ্রতিক্রিয়া সময় (সর্বোচ্চ)9.12sপ্রতিক্রিয়া সময় (মোট)15.94sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)7.72sপ্রতিক্রিয়া সময় (সর্বোচ্চ)7.72sপ্রতিক্রিয়া সময় (মোট)7.72sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)16.87sপ্রতিক্রিয়া সময় (সর্বোচ্চ)16.87sপ্রতিক্রিয়া সময় (মোট)16.87sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)38.47sপ্রতিক্রিয়া সময় (সর্বোচ্চ)38.47sপ্রতিক্রিয়া সময় (মোট)38.47sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)12.46sপ্রতিক্রিয়া সময় (সর্বোচ্চ)12.46sপ্রতিক্রিয়া সময় (মোট)12.46sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…