नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Anthropic: Claude Opus 4.8 vs Kwaipilot: KAT-Coder-Pro V2.5

सारांश

Claude Opus 4.8 (low) average score में आगे है: 7.7 vs 7.7. KAT-Coder-Pro V2.5 (high) की benchmark लागत कम है: $0.246 vs $1.270. Claude Opus 4.8 (low) तेज है: 10.83s vs 12.30s, pass rates 79.4% vs 63.5%.

अनुशंसित मॉडलKAT-Coder-Pro V2.5 (high)Its score stays close to the best score here (7.7 vs 7.7), while costing about 5.2x less than Claude Opus 4.8 (low).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक Claude Opus 4.8 Claude Opus 4.8 low रिलीज़: 2026-05-28 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high रिलीज़: 2026-07-14
स्कोर 7.7 7.7
रैंक #47 #53
विश्वसनीयता 10.0 10.0
संगति 8.8 8.1
सही परीक्षण
प्रति प्रयास पास दर 79.4% 63.5%
अस्थिर टेस्ट 3 5
कुल रन 63 63
प्रति परिणाम लागत 8.466 2.228
कुल लागत $1.270 $0.246
इनपुट कीमत $5.000 / 1M $0.740 / 1M
आउटपुट कीमत $25.000 / 1M $2.960 / 1M
कुल इनपुट टोकन 60,946 42,750
आउटपुट टोकन 31,771 2,509
रीजनिंग टोकन 6,831 69,594
प्रतिक्रिया समय (औसत) 10.83s 12.30s
प्रतिक्रिया समय (अधिकतम) 127.97s 95.65s
प्रतिक्रिया समय (कुल) 227.39s 258.34s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#47 Claude Opus 4.8

low
लागत
$0.031
समय
14.1s
टोकन
1,345 tok

#53 KAT-Coder-Pro V2.5

high
लागत
$0.009
समय
26.4s
टोकन
3,117 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Claude Opus 4.8 6.6 4.6 77.8% 2 7.58s 10,590 3,637 809
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461

त्वरित तुलना

तुलना जोड़ी बदलें