नेविगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY तुलना

Anthropic: Claude Sonnet 4.6 vs Kwaipilot: KAT-Coder-Pro V2.5

सारांश

Claude Sonnet 4.6 (medium) average score में आगे है: 7.8 vs 7.7. KAT-Coder-Pro V2.5 (high) की benchmark लागत कम है: $0.246 vs $1.418. KAT-Coder-Pro V2.5 (high) तेज है: 12.30s vs 17.06s, pass rates 65.1% vs 63.5%.

अनुशंसित मॉडलKAT-Coder-Pro V2.5 (high)Its score stays close to the best score here (7.7 vs 7.8), while costing about 5.8x less than Claude Sonnet 4.6 (medium).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक Claude Sonnet 4.6 Claude Sonnet 4.6 medium रिलीज़: 2026-02-17 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high रिलीज़: 2026-07-14
स्कोर 7.8 7.7
रैंक #40 #53
विश्वसनीयता 10.0 10.0
संगति 9.1 8.1
सही परीक्षण
प्रति प्रयास पास दर 65.1% 63.5%
अस्थिर टेस्ट 2 5
कुल रन 63 63
प्रति परिणाम लागत 10.904 2.228
कुल लागत $1.418 $0.246
इनपुट कीमत $3.000 / 1M $0.740 / 1M
आउटपुट कीमत $15.000 / 1M $2.960 / 1M
कुल इनपुट टोकन 49,112 42,750
आउटपुट टोकन 54,703 2,509
रीजनिंग टोकन 29,970 69,594
प्रतिक्रिया समय (औसत) 17.06s 12.30s
प्रतिक्रिया समय (अधिकतम) 46.35s 95.65s
प्रतिक्रिया समय (कुल) 221.83s 258.34s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#40 Claude Sonnet 4.6

medium
अमान्य SVG
लागत
$0.000
समय
300.0s
टोकन
0 tok

#53 KAT-Coder-Pro V2.5

high
लागत
$0.009
समय
26.4s
टोकन
3,117 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Claude Sonnet 4.6 5.7 6.6 44.4% 1 33.29s 6,995 16,089 3,686
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461

त्वरित तुलना

तुलना जोड़ी बदलें