नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.4 Nano

सारांश

average score लगभग बराबर है: 7.5 vs 7.5. GPT-5.4 Nano (medium) की benchmark लागत कम है: $0.107 vs $0.275. GPT-5.4 Nano (medium) तेज है: 11.95s vs 12.95s, pass rates 65.1% vs 63.5%.

अनुशंसित मॉडलGPT-5.4 Nano (medium)It has the best score here (7.5), while costing about 2.6x less than KAT-Coder-Pro V2.5 (medium).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium रिलीज़: 2026-07-14 GPT-5.4 Nano GPT-5.4 Nano medium रिलीज़: 2026-03-17
स्कोर 7.5 7.5
रैंक #60 #62
विश्वसनीयता 10.0 10.0
संगति 7.7 8.4
सही परीक्षण
प्रति प्रयास पास दर 65.1% 63.5%
अस्थिर टेस्ट 6 4
कुल रन 63 63
प्रति परिणाम लागत 2.498 0.969
कुल लागत $0.275 $0.107
इनपुट कीमत $0.740 / 1M $0.200 / 1M
आउटपुट कीमत $2.960 / 1M $1.250 / 1M
कुल इनपुट टोकन 42,750 35,434
आउटपुट टोकन 2,098 3,014
रीजनिंग टोकन 80,027 76,520
प्रतिक्रिया समय (औसत) 12.95s 11.95s
प्रतिक्रिया समय (अधिकतम) 81.45s 94.06s
प्रतिक्रिया समय (कुल) 271.92s 250.98s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
लागत
$0.009
समय
25.6s
टोकन
2,939 tok

#62 GPT-5.4 Nano

medium
लागत
$0.007
समय
24.6s
टोकन
4,943 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
GPT-5.4 Nano 6.1 4.7 66.7% 2 19.12s 7,305 516 20,778

त्वरित तुलना

तुलना जोड़ी बदलें