नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs OpenAI: GPT-5.6 Sol

सारांश

GPT-5.6 Sol average score मध्ये पुढे आहे: 6.3 vs 6.2. KAT-Coder-Air V2.5 (high) चा benchmark खर्च कमी आहे: $0.064 vs $0.225. GPT-5.6 Sol वेगवान आहे: 1.66s vs 11.02s, pass rates 46.0% vs 57.1%.

शिफारस केलेले मॉडेलGPT-5.6 SolIt has the best score here (6.3), while responding about 6.6x faster than KAT-Coder-Air V2.5 (high).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high प्रकाशन: 2026-07-14 GPT-5.6 Sol GPT-5.6 Sol none प्रकाशन: 2026-07-09
स्कोअर 6.2 6.3
क्रमांक #110 #106
विश्वसनीयता 9.7 10.0
सुसंगतता 7.6 9.0
बरोबर चाचण्या
प्रति प्रयत्न पास दर 46.0% 57.1%
अस्थिर चाचण्या 6 3
एकूण रन 63 63
प्रति निकाल खर्च 0.910 2.244
एकूण खर्च $0.064 $0.225
इनपुट किंमत $0.150 / 1M $5.000 / 1M
आउटपुट किंमत $0.600 / 1M $30.000 / 1M
एकूण इनपुट टोकन्स 41,748 34,218
आउटपुट टोकन्स 3,894 1,776
रिझनिंग टोकन्स 91,773 0
प्रतिसाद वेळ (सरासरी) 11.02s 1.66s
प्रतिसाद वेळ (कमाल) 104.98s 3.93s
प्रतिसाद वेळ (एकूण) 231.37s 34.81s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 KAT-Coder-Air V2.5

high
अवैध SVG
खर्च
$0.000
वेळ
300.0s
टोकन्स
0 tok

#106 GPT-5.6 Sol

none
खर्च
$0.116
वेळ
78.7s
टोकन्स
3,944 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
GPT-5.6 Sol 5.5 10.0 33.3% 0 1.39s 7,302 390 0

झटपट तुलना

तुलना जोडी बदला