নেভিগেশন
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs StepFun: Step 3.7 Flash

সারাংশ

Step 3.7 Flash (low) average score-এ এগিয়ে: 7.7 vs 7.5. KAT-Coder-Pro V2.5 (medium)-এর benchmark খরচ কম: $0.275 vs $0.341. KAT-Coder-Pro V2.5 (medium) দ্রুত: 12.95s vs 15.74s, pass rates 65.1% vs 68.3%.

প্রস্তাবিত মডেলKAT-Coder-Pro V2.5 (medium)It offers the best overall trade-off: a competitive score (7.5), lower cost than Step 3.7 Flash (low), and balanced response time.

AI BENCHY টেস্ট স্যুট থেকে বেঞ্চমার্ক তৈরি হয়েছে: 2026-07-14

মেট্রিক KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium প্রকাশ: 2026-07-14 Step 3.7 Flash Step 3.7 Flash low প্রকাশ: 2026-05-29
স্কোর 7.5 7.7
র‍্যাঙ্ক #60 #51
নির্ভরযোগ্যতা 10.0 10.0
ধারাবাহিকতা 7.7 8.4
সঠিক টেস্ট
প্রতি চেষ্টায় পাস রেট 65.1% 68.3%
অস্থির টেস্ট 6 4
মোট রান 63 63
প্রতি ফলাফলে খরচ 2.498 2.840
মোট খরচ $0.275 $0.341
ইনপুট মূল্য $0.740 / 1M $0.200 / 1M
আউটপুট মূল্য $2.960 / 1M $1.150 / 1M
মোট ইনপুট টোকেন 42,750 40,101
আউটপুট টোকেন 2,098 289,325
রিজনিং টোকেন 80,027 0
প্রতিক্রিয়া সময় (গড়) 12.95s 15.74s
প্রতিক্রিয়া সময় (সর্বোচ্চ) 81.45s 124.75s
প্রতিক্রিয়া সময় (মোট) 271.92s 330.63s

জেনারেশন শোকেস

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
খরচ
$0.009
সময়
25.6s
টোকেন
2,939 tok

#51 Step 3.7 Flash

low
অবৈধ SVG
খরচ
$0.004
সময়
25.3s
টোকেন
3,072 tok

স্কোর অনুযায়ী শীর্ষ মডেল

স্কোর বনাম মোট খরচ

প্রতিক্রিয়া সময় (গড়)

স্কোর vs প্রতিক্রিয়া সময় (গড়)

মোট আউটপুট টোকেন

স্কোর vs মোট আউটপুট টোকেন

বিভাগভিত্তিক বিশ্লেষণ

কোডিং স্কোর ধারাবাহিকতা প্রতি চেষ্টায় পাস রেট অস্থির টেস্ট সঠিক টেস্ট প্রতিক্রিয়া সময় (গড়) ইনপুট টোকেন আউটপুট টোকেন রিজনিং টোকেন
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

দ্রুত তুলনা

তুলনার জুটি বদলান