नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 5 vs Kwaipilot: KAT-Coder-Pro V2.5

सारांश

KAT-Coder-Pro V2.5 (low) average score मध्ये पुढे आहे: 8.0 vs 7.9. KAT-Coder-Pro V2.5 (low) चा benchmark खर्च कमी आहे: $0.220 vs $0.550. Claude Sonnet 5 (medium) वेगवान आहे: 9.94s vs 10.44s, pass rates 79.4% vs 71.4%.

शिफारस केलेले मॉडेलKAT-Coder-Pro V2.5 (low)It has the best score here (8.0), while costing about 2.5x less than Claude Sonnet 5 (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक Claude Sonnet 5 Claude Sonnet 5 medium प्रकाशन: 2026-06-30 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low प्रकाशन: 2026-07-14
स्कोअर 7.9 8.0
क्रमांक #37 #35
विश्वसनीयता 10.0 9.9
सुसंगतता 9.0 7.3
बरोबर चाचण्या
प्रति प्रयत्न पास दर 79.4% 71.4%
अस्थिर चाचण्या 3 7
एकूण रन 63 63
प्रति निकाल खर्च 3.662 1.991
एकूण खर्च $0.550 $0.220
इनपुट किंमत $2.000 / 1M $0.740 / 1M
आउटपुट किंमत $10.000 / 1M $2.960 / 1M
एकूण इनपुट टोकन्स 67,416 42,750
आउटपुट टोकन्स 34,012 2,167
रिझनिंग टोकन्स 7,673 61,133
प्रतिसाद वेळ (सरासरी) 9.94s 10.44s
प्रतिसाद वेळ (कमाल) 56.94s 51.34s
प्रतिसाद वेळ (एकूण) 208.71s 219.17s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#37 Claude Sonnet 5

medium
खर्च
$0.007
वेळ
6.4s
टोकन्स
832 tok

#35 KAT-Coder-Pro V2.5

low
खर्च
$0.016
वेळ
47.6s
टोकन्स
5,182 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Claude Sonnet 5 9.0 7.9 88.9% 1 17.28s 10,590 13,153 2,379
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

झटपट तुलना

तुलना जोडी बदला