नेविगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY तुलना

Anthropic: Claude Opus 4.8 vs Kwaipilot: KAT-Coder-Pro V2.5

सारांश

KAT-Coder-Pro V2.5 (medium) average score में आगे है: 7.5 vs 7.2. KAT-Coder-Pro V2.5 (medium) की benchmark लागत कम है: $0.275 vs $0.539. Claude Opus 4.8 तेज है: 3.48s vs 12.95s, pass rates 61.9% vs 65.1%.

अनुशंसित मॉडलKAT-Coder-Pro V2.5 (medium)It has the best score here (7.5), while costing about 2.0x less than Claude Opus 4.8.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक Claude Opus 4.8 Claude Opus 4.8 none रिलीज़: 2026-05-28 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium रिलीज़: 2026-07-14
स्कोर 7.2 7.5
रैंक #73 #60
विश्वसनीयता 10.0 10.0
संगति 9.2 7.7
सही परीक्षण
प्रति प्रयास पास दर 61.9% 65.1%
अस्थिर टेस्ट 2 6
कुल रन 63 63
प्रति परिणाम लागत 4.485 2.498
कुल लागत $0.539 $0.275
इनपुट कीमत $5.000 / 1M $0.740 / 1M
आउटपुट कीमत $25.000 / 1M $2.960 / 1M
कुल इनपुट टोकन 67,104 42,750
आउटपुट टोकन 8,107 2,098
रीजनिंग टोकन 0 80,027
प्रतिक्रिया समय (औसत) 3.48s 12.95s
प्रतिक्रिया समय (अधिकतम) 17.73s 81.45s
प्रतिक्रिया समय (कुल) 73.00s 271.92s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#73 Claude Opus 4.8

none
लागत
$0.053
समय
22.0s
टोकन
2,253 tok

#60 KAT-Coder-Pro V2.5

medium
लागत
$0.009
समय
25.6s
टोकन
2,939 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Claude Opus 4.8 5.5 10.0 33.3% 0 3.29s 10,590 1,332 0
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658

त्वरित तुलना

तुलना जोड़ी बदलें