नेव्हिगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs OpenAI: GPT-5.6 Sol

सारांश

GPT-5.6 Sol average score मध्ये पुढे आहे: 6.3 vs 6.2. KAT-Coder-Air V2.5 (medium) चा benchmark खर्च कमी आहे: $0.045 vs $0.225. GPT-5.6 Sol वेगवान आहे: 1.66s vs 8.28s, pass rates 47.6% vs 57.1%.

शिफारस केलेले मॉडेलGPT-5.6 SolIt has the best score here (6.3), while responding about 5.0x faster than KAT-Coder-Air V2.5 (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium प्रकाशन: 2026-07-14 GPT-5.6 Sol GPT-5.6 Sol none प्रकाशन: 2026-07-09
स्कोअर 6.2 6.3
क्रमांक #115 #106
विश्वसनीयता 9.7 10.0
सुसंगतता 8.8 9.0
बरोबर चाचण्या
प्रति प्रयत्न पास दर 47.6% 57.1%
अस्थिर चाचण्या 3 3
एकूण रन 63 63
प्रति निकाल खर्च 0.562 2.244
एकूण खर्च $0.045 $0.225
इनपुट किंमत $0.150 / 1M $5.000 / 1M
आउटपुट किंमत $0.600 / 1M $30.000 / 1M
एकूण इनपुट टोकन्स 42,750 34,218
आउटपुट टोकन्स 7,759 1,776
रिझनिंग टोकन्स 56,357 0
प्रतिसाद वेळ (सरासरी) 8.28s 1.66s
प्रतिसाद वेळ (कमाल) 48.19s 3.93s
प्रतिसाद वेळ (एकूण) 173.80s 34.81s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#115 KAT-Coder-Air V2.5

medium
खर्च
$0.003
वेळ
23.7s
टोकन्स
4,924 tok

#106 GPT-5.6 Sol

none
खर्च
$0.116
वेळ
78.7s
टोकन्स
3,944 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Air V2.5 3.6 7.0 22.2% 1 23.37s 7,893 5,199 29,973
GPT-5.6 Sol 5.5 10.0 33.3% 0 1.39s 7,302 390 0

झटपट तुलना

तुलना जोडी बदला