नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Air V2.5 vs OpenAI: GPT-5.6 Sol

सारांश

GPT-5.6 Sol average score में आगे है: 6.3 vs 6.2. KAT-Coder-Air V2.5 (high) की benchmark लागत कम है: $0.064 vs $0.225. GPT-5.6 Sol तेज है: 1.66s vs 11.02s, pass rates 46.0% vs 57.1%.

अनुशंसित मॉडलGPT-5.6 SolIt has the best score here (6.3), while responding about 6.6x faster than KAT-Coder-Air V2.5 (high).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high रिलीज़: 2026-07-14 GPT-5.6 Sol GPT-5.6 Sol none रिलीज़: 2026-07-09
स्कोर 6.2 6.3
रैंक #110 #106
विश्वसनीयता 9.7 10.0
संगति 7.6 9.0
सही परीक्षण
प्रति प्रयास पास दर 46.0% 57.1%
अस्थिर टेस्ट 6 3
कुल रन 63 63
प्रति परिणाम लागत 0.910 2.244
कुल लागत $0.064 $0.225
इनपुट कीमत $0.150 / 1M $5.000 / 1M
आउटपुट कीमत $0.600 / 1M $30.000 / 1M
कुल इनपुट टोकन 41,748 34,218
आउटपुट टोकन 3,894 1,776
रीजनिंग टोकन 91,773 0
प्रतिक्रिया समय (औसत) 11.02s 1.66s
प्रतिक्रिया समय (अधिकतम) 104.98s 3.93s
प्रतिक्रिया समय (कुल) 231.37s 34.81s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 KAT-Coder-Air V2.5

high
अमान्य SVG
लागत
$0.000
समय
300.0s
टोकन
0 tok

#106 GPT-5.6 Sol

none
लागत
$0.116
समय
78.7s
टोकन
3,944 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
GPT-5.6 Sol 5.5 10.0 33.3% 0 1.39s 7,302 390 0

त्वरित तुलना

तुलना जोड़ी बदलें