नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5 Nano

सारांश

KAT-Coder-Pro V2.5 average score में आगे है: 6.8 vs 6.7. GPT-5 Nano (medium) की benchmark लागत कम है: $0.081 vs $0.220. KAT-Coder-Pro V2.5 तेज है: 10.81s vs 42.51s, pass rates 71.4% vs 57.1%.

अनुशंसित मॉडलKAT-Coder-Pro V2.5It has the best score here (6.8), while responding about 3.9x faster than GPT-5 Nano (medium).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none रिलीज़: 2026-07-14 GPT-5 Nano GPT-5 Nano medium रिलीज़: 2025-08-07
स्कोर 6.8 6.7
रैंक #89 #97
विश्वसनीयता 10.0 10.0
संगति 7.3 7.3
सही परीक्षण
प्रति प्रयास पास दर 71.4% 57.1%
अस्थिर टेस्ट 7 7
कुल रन 63 63
प्रति परिणाम लागत 1.992 0.897
कुल लागत $0.220 $0.081
इनपुट कीमत $0.740 / 1M $0.050 / 1M
आउटपुट कीमत $2.960 / 1M $0.400 / 1M
कुल इनपुट टोकन 42,749 34,108
आउटपुट टोकन 63,338 5,464
रीजनिंग टोकन 0 192,064
प्रतिक्रिया समय (औसत) 10.81s 42.51s
प्रतिक्रिया समय (अधिकतम) 53.57s 204.02s
प्रतिक्रिया समय (कुल) 227.02s 595.09s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 KAT-Coder-Pro V2.5

none
लागत
$0.010
समय
29.0s
टोकन
3,439 tok

#97 GPT-5 Nano

medium
लागत
$0.006
समय
108.5s
टोकन
13,209 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
GPT-5 Nano 7.0 7.7 55.6% 1 41.62s 7,305 740 41,152

त्वरित तुलना

तुलना जोड़ी बदलें