Inception: Mercury 2 vs Kwaipilot: KAT-Coder-Air V2.5
KAT-Coder-Air V2.5 (low) average score-এ এগিয়ে: 5.4 vs 4.6. Mercury 2-এর benchmark খরচ কম: $0.030 vs $0.041. Mercury 2 দ্রুত: 829ms vs 10.09s, pass rates 22.7% vs 45.5%.
প্রস্তাবিত মডেলKAT-Coder-Air V2.5 (low)It has the strongest score in this comparison (5.4) and the best overall balance of cost and response time across all 2 models.
AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-07-18
10.0প্রথম প্রচেষ্টার সফলতা স্কোর: 10.0 মানে সফল কলের আগে লক্ষ্য API বা রেট-লিমিটের কোনো পুনরায় চেষ্টা-যোগ্য ব্যর্থতা নেই; ট্র্যাক করা ব্যর্থতা স্কোর কমায়।…
9.9প্রথম প্রচেষ্টার সফলতা স্কোর: 10.0 মানে সফল কলের আগে লক্ষ্য API বা রেট-লিমিটের কোনো পুনরায় চেষ্টা-যোগ্য ব্যর্থতা নেই; ট্র্যাক করা ব্যর্থতা স্কোর কমায়।…
ধারাবাহিকতা
9.2ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
7.4ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
সঠিক টেস্ট
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 17নির্দেশনা অনুসরণ করা হয়নি: 1প্রতিক্রিয়া সময় (গড়)829msপ্রতিক্রিয়া সময় (সর্বোচ্চ)4.52sপ্রতিক্রিয়া সময় (মোট)18.24sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 4প্রতিক্রিয়া সময় (গড়)483msপ্রতিক্রিয়া সময় (সর্বোচ্চ)716msপ্রতিক্রিয়া সময় (মোট)1.93sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
5.8ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
83.3%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
2অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 2প্রতিক্রিয়া সময় (গড়)3.50sপ্রতিক্রিয়া সময় (সর্বোচ্চ)5.89sপ্রতিক্রিয়া সময় (মোট)13.99sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
9.6ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 3প্রতিক্রিয়া সময় (গড়)1.03sপ্রতিক্রিয়া সময় (সর্বোচ্চ)1.43sপ্রতিক্রিয়া সময় (মোট)3.10sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
7.3ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
11.1%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।অতিরিক্ত ফরম্যাটিং: 2ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)11.06sপ্রতিক্রিয়া সময় (সর্বোচ্চ)14.01sপ্রতিক্রিয়া সময় (মোট)33.18sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 2প্রতিক্রিয়া সময় (গড়)2.56sপ্রতিক্রিয়া সময় (সর্বোচ্চ)4.52sপ্রতিক্রিয়া সময় (মোট)5.13sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
5.8ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
66.7%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।API ত্রুটি: 1প্রতিক্রিয়া সময় (গড়)55.86sপ্রতিক্রিয়া সময় (সর্বোচ্চ)86.23sপ্রতিক্রিয়া সময় (মোট)111.72sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
5.9ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
83.3%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)667msপ্রতিক্রিয়া সময় (সর্বোচ্চ)819msপ্রতিক্রিয়া সময় (মোট)1.33sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
50.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)2.82sপ্রতিক্রিয়া সময় (সর্বোচ্চ)3.26sপ্রতিক্রিয়া সময় (মোট)5.64sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
7.2ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
44.4%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 2প্রতিক্রিয়া সময় (গড়)534msপ্রতিক্রিয়া সময় (সর্বোচ্চ)733msপ্রতিক্রিয়া সময় (মোট)1.60sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
7.2ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
11.1%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
1অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।অতিরিক্ত ফরম্যাটিং: 2API ত্রুটি: 1প্রতিক্রিয়া সময় (গড়)4.99sপ্রতিক্রিয়া সময় (সর্বোচ্চ)8.65sপ্রতিক্রিয়া সময় (মোট)14.97sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।নির্দেশনা অনুসরণ করা হয়নি: 1প্রতিক্রিয়া সময় (গড়)628msপ্রতিক্রিয়া সময় (সর্বোচ্চ)628msপ্রতিক্রিয়া সময় (মোট)628msএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।নির্দেশনা অনুসরণ করা হয়নি: 1প্রতিক্রিয়া সময় (গড়)10.11sপ্রতিক্রিয়া সময় (সর্বোচ্চ)10.11sপ্রতিক্রিয়া সময় (মোট)10.11sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
50.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)551msপ্রতিক্রিয়া সময় (সর্বোচ্চ)622msপ্রতিক্রিয়া সময় (মোট)1.10sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)1.64sপ্রতিক্রিয়া সময় (সর্বোচ্চ)2.19sপ্রতিক্রিয়া সময় (মোট)3.28sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 3প্রতিক্রিয়া সময় (গড়)535msপ্রতিক্রিয়া সময় (সর্বোচ্চ)642msপ্রতিক্রিয়া সময় (মোট)1.60sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
4.6ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
22.2%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
2অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 2নির্দেশনা অনুসরণ করা হয়নি: 1প্রতিক্রিয়া সময় (গড়)1.57sপ্রতিক্রিয়া সময় (সর্বোচ্চ)1.86sপ্রতিক্রিয়া সময় (মোট)4.71sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)1.27sপ্রতিক্রিয়া সময় (সর্বোচ্চ)1.27sপ্রতিক্রিয়া সময় (মোট)1.27sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
100.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।কোনো ব্যর্থ উত্তর নেই।প্রতিক্রিয়া সময় (গড়)4.47sপ্রতিক্রিয়া সময় (সর্বোচ্চ)4.47sপ্রতিক্রিয়া সময় (মোট)4.47sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)548msপ্রতিক্রিয়া সময় (সর্বোচ্চ)548msপ্রতিক্রিয়া সময় (মোট)548msএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…
10.0ধারাবাহিকতা স্কোর রানগুলোর মধ্যে স্থিতিশীলতা দেখায় (10 = খুব স্থিতিশীল, ভুল হলেও ধারাবাহিকভাবে ভুল)।…
0.0%প্রতি চেষ্টায় পাস রেট = পাস করা চেষ্টা / সব রান মিলিয়ে মোট চেষ্টা।…
0অস্থির টেস্টে রানভেদে মিশ্র ফল হয়েছে (কমপক্ষে একটি পাস এবং একটি ফেল)।…
একটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।ভুল উত্তর: 1প্রতিক্রিয়া সময় (গড়)19.98sপ্রতিক্রিয়া সময় (সর্বোচ্চ)19.98sপ্রতিক্রিয়া সময় (মোট)19.98sএকটি টেস্ট তখনই সম্পূর্ণ পাস ধরা হবে যখন তার সব রান পাস করবে।…