নেভিগেশন
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs StepFun: Step 3.5 Flash

সারাংশ

KAT-Coder-Pro V2.5 average score-এ এগিয়ে: 6.8 vs 6.6. Step 3.5 Flash (medium)-এর benchmark খরচ কম: $0.070 vs $0.220. KAT-Coder-Pro V2.5 দ্রুত: 10.81s vs 72.53s, pass rates 71.4% vs 54.0%.

প্রস্তাবিত মডেলKAT-Coder-Pro V2.5It has the best score here (6.8), while responding about 6.7x faster than Step 3.5 Flash (medium).

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-07-14

মেট্রিক KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none প্রকাশ: 2026-07-14 Step 3.5 Flash Step 3.5 Flash medium প্রকাশ: 2026-02-01
স্কোর 6.8 6.6
র‍্যাঙ্ক #89 #98
নির্ভরযোগ্যতা 10.0 10.0
ধারাবাহিকতা 7.3 8.9
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 71.4% 54.0%
অস্থির টেস্ট 7 1
মোট রান 63 60
প্রতি ফলাফলে খরচ 1.992 0.198
মোট খরচ $0.220 $0.070
ইনপুট মূল্য $0.740 / 1M $0.100 / 1M
আউটপুট মূল্য $2.960 / 1M $0.300 / 1M
মোট ইনপুট টোকেন 42,749 34,431
আউটপুট টোকেন 63,338 91,587
রিজনিং টোকেন 0 195,973
প্রতিক্রিয়া সময় (গড়) 10.81s 72.53s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 53.57s 453.94s
প্রতিক্রিয়া সময় (মোট) 227.02s 1015.47s

জেনারেশন শোকেস

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 KAT-Coder-Pro V2.5

none
খরচ
$0.010
সময়
29.0s
টোকেন
3,439 tok

#98 Step 3.5 Flash

medium
খরচ
$0.008
সময়
277.1s
টোকেন
23,695 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
Step 3.5 Flash 2.4 5.2 0.0% 0 258.38s 2,211 13,207 22,429

দ্রুত তুলনা

তুলনার জুটি বদলান