नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Anthropic: Claude Sonnet 5 vs Kwaipilot: KAT-Coder-Pro V2.5

सारांश

KAT-Coder-Pro V2.5 (low) average score में आगे है: 8.0 vs 7.9. KAT-Coder-Pro V2.5 (low) की benchmark लागत कम है: $0.220 vs $0.550. Claude Sonnet 5 (medium) तेज है: 9.94s vs 10.44s, pass rates 79.4% vs 71.4%.

अनुशंसित मॉडलKAT-Coder-Pro V2.5 (low)It has the best score here (8.0), while costing about 2.5x less than Claude Sonnet 5 (medium).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक Claude Sonnet 5 Claude Sonnet 5 medium रिलीज़: 2026-06-30 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low रिलीज़: 2026-07-14
स्कोर 7.9 8.0
रैंक #37 #35
विश्वसनीयता 10.0 9.9
संगति 9.0 7.3
सही परीक्षण
प्रति प्रयास पास दर 79.4% 71.4%
अस्थिर टेस्ट 3 7
कुल रन 63 63
प्रति परिणाम लागत 3.662 1.991
कुल लागत $0.550 $0.220
इनपुट कीमत $2.000 / 1M $0.740 / 1M
आउटपुट कीमत $10.000 / 1M $2.960 / 1M
कुल इनपुट टोकन 67,416 42,750
आउटपुट टोकन 34,012 2,167
रीजनिंग टोकन 7,673 61,133
प्रतिक्रिया समय (औसत) 9.94s 10.44s
प्रतिक्रिया समय (अधिकतम) 56.94s 51.34s
प्रतिक्रिया समय (कुल) 208.71s 219.17s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#37 Claude Sonnet 5

medium
लागत
$0.007
समय
6.4s
टोकन
832 tok

#35 KAT-Coder-Pro V2.5

low
लागत
$0.016
समय
47.6s
टोकन
5,182 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Claude Sonnet 5 9.0 7.9 88.9% 1 17.28s 10,590 13,153 2,379
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

त्वरित तुलना

तुलना जोड़ी बदलें