नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs Z.ai: GLM 5.1

सारांश

GLM 5.1 (medium) average score मध्ये पुढे आहे: 7.1 vs 6.8. KAT-Coder-Pro V2.5 चा benchmark खर्च कमी आहे: $0.220 vs $0.288. KAT-Coder-Pro V2.5 वेगवान आहे: 10.81s vs 33.67s, pass rates 71.4% vs 68.3%.

शिफारस केलेले मॉडेलKAT-Coder-Pro V2.5Its score stays close to the best score here (6.8 vs 7.1), while responding about 3.1x faster than GLM 5.1 (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none प्रकाशन: 2026-07-14 GLM 5.1 GLM 5.1 medium प्रकाशन: 2026-04-07
स्कोअर 6.8 7.1
क्रमांक #89 #80
विश्वसनीयता 10.0 6.7
सुसंगतता 7.3 8.3
बरोबर चाचण्या
प्रति प्रयत्न पास दर 71.4% 68.3%
अस्थिर चाचण्या 7 4
एकूण रन 63 63
प्रति निकाल खर्च 1.992 2.496
एकूण खर्च $0.220 $0.288
इनपुट किंमत $0.740 / 1M $0.966 / 1M
आउटपुट किंमत $2.960 / 1M $3.036 / 1M
एकूण इनपुट टोकन्स 42,749 32,995
आउटपुट टोकन्स 63,338 11,655
रिझनिंग टोकन्स 0 75,421
प्रतिसाद वेळ (सरासरी) 10.81s 33.67s
प्रतिसाद वेळ (कमाल) 53.57s 172.60s
प्रतिसाद वेळ (एकूण) 227.02s 673.41s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 KAT-Coder-Pro V2.5

none
खर्च
$0.010
वेळ
29.0s
टोकन्स
3,439 tok

#80 GLM 5.1

medium
अवैध SVG
खर्च
$0.000
वेळ
300.0s
टोकन्स
0 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
GLM 5.1 4.6 3.7 44.5% 2 109.63s 5,702 4,871 37,826

झटपट तुलना

तुलना जोडी बदला