نیویگیشن
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Kwaipilot: KAT-Coder-Pro V2.5

خلاصہ

KAT-Coder-Pro V2.5 (low) average score میں آگے ہے: 8.0 vs 7.8. KAT-Coder-Pro V2.5 (low) کی benchmark لاگت کم ہے: $0.220 vs $1.418. KAT-Coder-Pro V2.5 (low) تیز ہے: 10.44s vs 17.06s، pass rates 65.1% vs 71.4%.

تجویز کردہ ماڈلKAT-Coder-Pro V2.5 (low)It has the best score here (8.0), while costing about 6.5x less than Claude Sonnet 4.6 (medium).

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-07-14

میٹرک Claude Sonnet 4.6 Claude Sonnet 4.6 medium اجرا: 2026-02-17 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low اجرا: 2026-07-14
اسکور 7.8 8.0
درجہ #40 #35
اعتماد پذیری 10.0 9.9
تسلسل 9.1 7.3
درست ٹیسٹس
فی کوشش کامیابی کی شرح 65.1% 71.4%
غیر مستحکم ٹیسٹ 2 7
کل رنز 63 63
فی نتیجہ لاگت 10.904 1.991
کل لاگت $1.418 $0.220
ان پٹ قیمت $3.000 / 1M $0.740 / 1M
آؤٹ پٹ قیمت $15.000 / 1M $2.960 / 1M
کل ان پٹ ٹوکنز 49,112 42,750
آؤٹ پٹ ٹوکنز 54,703 2,167
ریزننگ ٹوکنز 29,970 61,133
ردِعمل کا وقت (اوسط) 17.06s 10.44s
ردِعمل کا وقت (زیادہ سے زیادہ) 46.35s 51.34s
ردِعمل کا وقت (کل) 221.83s 219.17s

جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#40 Claude Sonnet 4.6

medium
غلط SVG
لاگت
$0.000
وقت
300.0s
ٹوکنز
0 tok

#35 KAT-Coder-Pro V2.5

low
لاگت
$0.016
وقت
47.6s
ٹوکنز
5,182 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Claude Sonnet 4.6 5.7 6.6 44.4% 1 33.29s 6,995 16,089 3,686
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں