नेविगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY तुलना

Anthropic: Claude Sonnet 4.6 vs Kwaipilot: KAT-Coder-Pro V2.5

सारांश

KAT-Coder-Pro V2.5 (medium) average score में आगे है: 7.5 vs 7.3. KAT-Coder-Pro V2.5 (medium) की benchmark लागत कम है: $0.275 vs $0.316. Claude Sonnet 4.6 तेज है: 5.04s vs 12.95s, pass rates 55.6% vs 65.1%.

अनुशंसित मॉडलClaude Sonnet 4.6Its score stays close to the best score here (7.3 vs 7.5), while responding about 2.6x faster than KAT-Coder-Pro V2.5 (medium).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक Claude Sonnet 4.6 Claude Sonnet 4.6 none रिलीज़: 2026-02-17 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium रिलीज़: 2026-07-14
स्कोर 7.3 7.5
रैंक #71 #60
विश्वसनीयता 10.0 10.0
संगति 9.7 7.7
सही परीक्षण
प्रति प्रयास पास दर 55.6% 65.1%
अस्थिर टेस्ट 1 6
कुल रन 63 63
प्रति परिणाम लागत 2.870 2.498
कुल लागत $0.316 $0.275
इनपुट कीमत $3.000 / 1M $0.740 / 1M
आउटपुट कीमत $15.000 / 1M $2.960 / 1M
कुल इनपुट टोकन 57,886 42,750
आउटपुट टोकन 9,465 2,098
रीजनिंग टोकन 0 80,027
प्रतिक्रिया समय (औसत) 5.04s 12.95s
प्रतिक्रिया समय (अधिकतम) 23.84s 81.45s
प्रतिक्रिया समय (कुल) 70.60s 271.92s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#71 Claude Sonnet 4.6

none
लागत
$0.038
समय
27.3s
टोकन
2,598 tok

#60 KAT-Coder-Pro V2.5

medium
लागत
$0.009
समय
25.6s
टोकन
2,939 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Claude Sonnet 4.6 5.5 10.0 33.3% 0 5.19s 8,522 2,127 0
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658

त्वरित तुलना

तुलना जोड़ी बदलें