নেভিগেশন
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Nemotron 3 Ultra 550b A55b

সারাংশ

KAT-Coder-Air V2.5 (medium) average score-এ এগিয়ে: 6.2 vs 6.1. Nemotron 3 Ultra 550b A55b-এর benchmark খরচ কম: $0.027 vs $0.045. Nemotron 3 Ultra 550b A55b দ্রুত: 2.27s vs 8.28s, pass rates 47.6% vs 44.4%.

প্রস্তাবিত মডেলNemotron 3 Ultra 550b A55bIts score stays close to the best score here (6.1 vs 6.2), while costing about 1.7x less than KAT-Coder-Air V2.5 (medium).

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-07-14

মেট্রিক KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium প্রকাশ: 2026-07-14 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b none প্রকাশ: 2026-06-04 বিনামূল্যে উপলভ্য
স্কোর 6.2 6.1
র‍্যাঙ্ক #115 #121
নির্ভরযোগ্যতা 9.7 10.0
ধারাবাহিকতা 8.8 9.2
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 47.6% 44.4%
অস্থির টেস্ট 3 2
মোট রান 63 63
প্রতি ফলাফলে খরচ 0.562 0.000
মোট খরচ $0.045 $0.027
ইনপুট মূল্য $0.150 / 1M $0.500 / 1M
আউটপুট মূল্য $0.600 / 1M $2.200 / 1M
মোট ইনপুট টোকেন 42,750 43,326
আউটপুট টোকেন 7,759 2,138
রিজনিং টোকেন 56,357 0
প্রতিক্রিয়া সময় (গড়) 8.28s 2.27s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 48.19s 13.49s
প্রতিক্রিয়া সময় (মোট) 173.80s 47.65s

জেনারেশন শোকেস

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#115 KAT-Coder-Air V2.5

medium
খরচ
$0.003
সময়
23.7s
টোকেন
4,924 tok

#121 Nemotron 3 Ultra 550b A55b

none
খরচ
$0.000
সময়
149.6s
টোকেন
3,405 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
KAT-Coder-Air V2.5 3.6 7.0 22.2% 1 23.37s 7,893 5,199 29,973
Nemotron 3 Ultra 550b A55b 5.5 10.0 33.3% 0 1.02s 7,623 369 0

দ্রুত তুলনা

তুলনার জুটি বদলান