नेविगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.4 Nano

सारांश

KAT-Coder-Pro V2.5 (high) average score में आगे है: 7.7 vs 7.5. GPT-5.4 Nano (medium) की benchmark लागत कम है: $0.107 vs $0.246. GPT-5.4 Nano (medium) तेज है: 11.95s vs 12.30s, pass rates 63.5% vs 63.5%.

अनुशंसित मॉडलGPT-5.4 Nano (medium)Its score stays close to the best score here (7.5 vs 7.7), while costing about 2.3x less than KAT-Coder-Pro V2.5 (high).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high रिलीज़: 2026-07-14 GPT-5.4 Nano GPT-5.4 Nano medium रिलीज़: 2026-03-17
स्कोर 7.7 7.5
रैंक #53 #62
विश्वसनीयता 10.0 10.0
संगति 8.1 8.4
सही परीक्षण
प्रति प्रयास पास दर 63.5% 63.5%
अस्थिर टेस्ट 5 4
कुल रन 63 63
प्रति परिणाम लागत 2.228 0.969
कुल लागत $0.246 $0.107
इनपुट कीमत $0.740 / 1M $0.200 / 1M
आउटपुट कीमत $2.960 / 1M $1.250 / 1M
कुल इनपुट टोकन 42,750 35,434
आउटपुट टोकन 2,509 3,014
रीजनिंग टोकन 69,594 76,520
प्रतिक्रिया समय (औसत) 12.30s 11.95s
प्रतिक्रिया समय (अधिकतम) 95.65s 94.06s
प्रतिक्रिया समय (कुल) 258.34s 250.98s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#53 KAT-Coder-Pro V2.5

high
लागत
$0.009
समय
26.4s
टोकन
3,117 tok

#62 GPT-5.4 Nano

medium
लागत
$0.007
समय
24.6s
टोकन
4,943 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
GPT-5.4 Nano 6.1 4.7 66.7% 2 19.12s 7,305 516 20,778

त्वरित तुलना

तुलना जोड़ी बदलें