KAT-Coder-Air V2.5 (medium) vs Nemotron 3.5 Lightning (high)
average score প্রায় সমান: 5.6 vs 5.6. KAT-Coder-Air V2.5 (medium)-এর benchmark খরচ কম: $0.048 vs $0.167. KAT-Coder-Air V2.5 (medium) দ্রুত: 8.42s vs 57.99s, pass rates 45.5% vs 48.5%.
AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে:
2026-08-11
র্যাঙ্ক
#187
মোট আউটপুট টোকেন
66,174
প্রতিক্রিয়া সময় (গড়)
8.42s
মোট খরচ
$0.048
র্যাঙ্ক
#189
মোট আউটপুট টোকেন
647,615
প্রতিক্রিয়া সময় (গড়)
57.99s
মোট খরচ
$0.167
প্রস্তাবিত মডেলKAT-Coder-Air V2.5 (medium)
It has the best score here (5.6), while costing about 3.5x less than Nemotron 3.5 Lightning (high).
9.9প্রথম প্রচেষ্টার সফলতা স্কোর: 10.0 মানে সফল কলের আগে লক্ষ্য API বা রেট-লিমিটের কোনো পুনরায় চেষ্টা-যোগ্য ব্যর্থতা নেই; ট্র্যাক করা ব্যর্থতা স্কোর কমায়।…
9.9প্রথম প্রচেষ্টার সফলতা স্কোর: 10.0 মানে সফল কলের আগে লক্ষ্য API বা রেট-লিমিটের কোনো পুনরায় চেষ্টা-যোগ্য ব্যর্থতা নেই; ট্র্যাক করা ব্যর্থতা স্কোর কমায়।…
ধারাবাহিকতা
8.9ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
6.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
8.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
91.7%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)3.79sপ্রতিক্রিয়া সময় (সর্বোচ্চ)9.97sপ্রতিক্রিয়া সময় (মোট)15.17sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
3.7ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
66.7%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
3অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 3প্রতিক্রিয়া সময় (গড়)10.29sপ্রতিক্রিয়া সময় (সর্বোচ্চ)17.68sপ্রতিক্রিয়া সময় (মোট)41.16sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
7.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
22.2%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 2অতিরিক্ত ফরম্যাটিং: 1প্রতিক্রিয়া সময় (গড়)23.37sপ্রতিক্রিয়া সময় (সর্বোচ্চ)48.19sপ্রতিক্রিয়া সময় (মোট)70.10sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
5.1ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
33.3%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
2অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 2অতিরিক্ত ফরম্যাটিং: 1প্রতিক্রিয়া সময় (গড়)168.41sপ্রতিক্রিয়া সময় (সর্বোচ্চ)280.94sপ্রতিক্রিয়া সময় (মোট)505.22sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
50.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।API ত্রুটি: 1প্রতিক্রিয়া সময় (গড়)19.56sপ্রতিক্রিয়া সময় (সর্বোচ্চ)27.68sপ্রতিক্রিয়া সময় (মোট)39.11sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
50.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।অবৈধ টুল কল: 1প্রতিক্রিয়া সময় (গড়)160.45sপ্রতিক্রিয়া সময় (সর্বোচ্চ)285.26sপ্রতিক্রিয়া সময় (মোট)320.90sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
50.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)3.65sপ্রতিক্রিয়া সময় (সর্বোচ্চ)4.88sপ্রতিক্রিয়া সময় (মোট)7.31sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
5.9ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
83.3%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।নির্দেশনা অনুসরণ করা হয়নি: 1প্রতিক্রিয়া সময় (গড়)13.99sপ্রতিক্রিয়া সময় (সর্বোচ্চ)18.67sপ্রতিক্রিয়া সময় (মোট)27.97sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 3প্রতিক্রিয়া সময় (গড়)4.87sপ্রতিক্রিয়া সময় (সর্বোচ্চ)6.73sপ্রতিক্রিয়া সময় (মোট)14.62sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
7.2ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
11.1%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 3প্রতিক্রিয়া সময় (গড়)86.57sপ্রতিক্রিয়া সময় (সর্বোচ্চ)226.92sপ্রতিক্রিয়া সময় (মোট)259.72sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।নির্দেশনা অনুসরণ করা হয়নি: 1প্রতিক্রিয়া সময় (গড়)9.81sপ্রতিক্রিয়া সময় (সর্বোচ্চ)9.81sপ্রতিক্রিয়া সময় (মোট)9.81sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
9.5ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)7.58sপ্রতিক্রিয়া সময় (সর্বোচ্চ)7.58sপ্রতিক্রিয়া সময় (মোট)7.58sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)1.50sপ্রতিক্রিয়া সময় (সর্বোচ্চ)1.88sপ্রতিক্রিয়া সময় (মোট)3.00sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
6.8ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
83.3%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।নির্দেশনা অনুসরণ করা হয়নি: 1প্রতিক্রিয়া সময় (গড়)4.98sপ্রতিক্রিয়া সময় (সর্বোচ্চ)5.05sপ্রতিক্রিয়া সময় (মোট)9.97sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
7.2ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
22.2%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 3প্রতিক্রিয়া সময় (গড়)1.87sপ্রতিক্রিয়া সময় (সর্বোচ্চ)2.41sপ্রতিক্রিয়া সময় (মোট)5.61sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
1.8ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
44.4%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
3অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।নির্দেশনা অনুসরণ করা হয়নি: 2ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)6.09sপ্রতিক্রিয়া সময় (সর্বোচ্চ)10.09sপ্রতিক্রিয়া সময় (মোট)18.26sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)4.77sপ্রতিক্রিয়া সময় (সর্বোচ্চ)4.77sপ্রতিক্রিয়া সময় (মোট)4.77sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)6.92sপ্রতিক্রিয়া সময় (সর্বোচ্চ)6.92sপ্রতিক্রিয়া সময় (মোট)6.92sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)15.74sপ্রতিক্রিয়া সময় (সর্বোচ্চ)15.74sপ্রতিক্রিয়া সময় (মোট)15.74sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)77.98sপ্রতিক্রিয়া সময় (সর্বোচ্চ)77.98sপ্রতিক্রিয়া সময় (মোট)77.98sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…