नेविगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Pro V2.5 vs StepFun: Step 3.7 Flash

सारांश

Step 3.7 Flash (medium) average score में आगे है: 8.5 vs 8.0. KAT-Coder-Pro V2.5 (low) की benchmark लागत कम है: $0.220 vs $0.376. KAT-Coder-Pro V2.5 (low) तेज है: 10.44s vs 20.35s, pass rates 71.4% vs 73.0%.

अनुशंसित मॉडलKAT-Coder-Pro V2.5 (low)Its score stays close to the best score here (8.0 vs 8.5), while costing about 1.7x less than Step 3.7 Flash (medium).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low रिलीज़: 2026-07-14 Step 3.7 Flash Step 3.7 Flash medium रिलीज़: 2026-05-29
स्कोर 8.0 8.5
रैंक #35 #23
विश्वसनीयता 9.9 9.9
संगति 7.3 9.3
सही परीक्षण
प्रति प्रयास पास दर 71.4% 73.0%
अस्थिर टेस्ट 7 2
कुल रन 63 61
प्रति परिणाम लागत 1.991 2.686
कुल लागत $0.220 $0.376
इनपुट कीमत $0.740 / 1M $0.200 / 1M
आउटपुट कीमत $2.960 / 1M $1.150 / 1M
कुल इनपुट टोकन 42,750 39,981
आउटपुट टोकन 2,167 319,958
रीजनिंग टोकन 61,133 0
प्रतिक्रिया समय (औसत) 10.44s 20.35s
प्रतिक्रिया समय (अधिकतम) 51.34s 113.98s
प्रतिक्रिया समय (कुल) 219.17s 427.42s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
लागत
$0.016
समय
47.6s
टोकन
5,182 tok

#23 Step 3.7 Flash

medium
लागत
$0.006
समय
46.2s
टोकन
4,466 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
Step 3.7 Flash 8.8 7.8 88.9% 1 27.42s 7,437 44,797 0

त्वरित तुलना

तुलना जोड़ी बदलें