नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Air V2.5 vs OpenAI: GPT-5.5

सारांश

GPT-5.5 average score में आगे है: 6.3 vs 6.2. KAT-Coder-Air V2.5 (medium) की benchmark लागत कम है: $0.045 vs $0.231. GPT-5.5 तेज है: 1.89s vs 8.28s, pass rates 47.6% vs 54.0%.

अनुशंसित मॉडलKAT-Coder-Air V2.5 (medium)Its score stays close to the best score here (6.2 vs 6.3), while costing about 5.1x less than GPT-5.5.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium रिलीज़: 2026-07-14 GPT-5.5 GPT-5.5 none रिलीज़: 2026-04-24
स्कोर 6.2 6.3
रैंक #115 #109
विश्वसनीयता 9.7 10.0
संगति 8.8 8.8
सही परीक्षण
प्रति प्रयास पास दर 47.6% 54.0%
अस्थिर टेस्ट 3 3
कुल रन 63 63
प्रति परिणाम लागत 0.562 2.302
कुल लागत $0.045 $0.231
इनपुट कीमत $0.150 / 1M $5.000 / 1M
आउटपुट कीमत $0.600 / 1M $30.000 / 1M
कुल इनपुट टोकन 42,750 34,212
आउटपुट टोकन 7,759 1,971
रीजनिंग टोकन 56,357 0
प्रतिक्रिया समय (औसत) 8.28s 1.89s
प्रतिक्रिया समय (अधिकतम) 48.19s 5.56s
प्रतिक्रिया समय (कुल) 173.80s 39.64s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#115 KAT-Coder-Air V2.5

medium
लागत
$0.003
समय
23.7s
टोकन
4,924 tok

#109 GPT-5.5

none
लागत
$0.090
समय
54.3s
टोकन
3,063 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Air V2.5 3.6 7.0 22.2% 1 23.37s 7,893 5,199 29,973
GPT-5.5 5.5 10.0 33.3% 0 1.35s 7,305 462 0

त्वरित तुलना

तुलना जोड़ी बदलें