نیویگیشن
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs StepFun: Step 3.5 Flash

خلاصہ

KAT-Coder-Pro V2.5 average score میں آگے ہے: 6.8 vs 6.6. Step 3.5 Flash (medium) کی benchmark لاگت کم ہے: $0.070 vs $0.220. KAT-Coder-Pro V2.5 تیز ہے: 10.81s vs 72.53s، pass rates 71.4% vs 54.0%.

تجویز کردہ ماڈلKAT-Coder-Pro V2.5It has the best score here (6.8), while responding about 6.7x faster than Step 3.5 Flash (medium).

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-07-14

میٹرک KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none اجرا: 2026-07-14 Step 3.5 Flash Step 3.5 Flash medium اجرا: 2026-02-01
اسکور 6.8 6.6
درجہ #89 #98
اعتماد پذیری 10.0 10.0
تسلسل 7.3 8.9
درست ٹیسٹس
فی کوشش کامیابی کی شرح 71.4% 54.0%
غیر مستحکم ٹیسٹ 7 1
کل رنز 63 60
فی نتیجہ لاگت 1.992 0.198
کل لاگت $0.220 $0.070
ان پٹ قیمت $0.740 / 1M $0.100 / 1M
آؤٹ پٹ قیمت $2.960 / 1M $0.300 / 1M
کل ان پٹ ٹوکنز 42,749 34,431
آؤٹ پٹ ٹوکنز 63,338 91,587
ریزننگ ٹوکنز 0 195,973
ردِعمل کا وقت (اوسط) 10.81s 72.53s
ردِعمل کا وقت (زیادہ سے زیادہ) 53.57s 453.94s
ردِعمل کا وقت (کل) 227.02s 1015.47s

جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 KAT-Coder-Pro V2.5

none
لاگت
$0.010
وقت
29.0s
ٹوکنز
3,439 tok

#98 Step 3.5 Flash

medium
لاگت
$0.008
وقت
277.1s
ٹوکنز
23,695 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
Step 3.5 Flash 2.4 5.2 0.0% 0 258.38s 2,211 13,207 22,429

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں