نیویگیشن
Advertise here

KAT-Coder-Pro V2.5 (default) vs Beam 1.0 501B A23B (high)

average score تقریباً برابر ہے: 6.1 vs 6.1. Beam 1.0 501B A23B (high) کی benchmark لاگت کم ہے: $0.674 vs $0.742. Beam 1.0 501B A23B (high) تیز ہے: 9.03s vs 24.96s، pass rates 68.1% vs 59.4%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-10-17

موازنہ کیے گئے ماڈلز

درجہ
#273
کل آؤٹ پٹ ٹوکنز
139,572
ردِعمل کا وقت (اوسط)
24.96s
کل لاگت
$0.742
درجہ
#266
کل آؤٹ پٹ ٹوکنز
147,207
ردِعمل کا وقت (اوسط)
9.03s
کل لاگت
$0.674
تجویز کردہ ماڈل Beam 1.0 501B A23B (high)

It has the best score here (6.1), while responding about 2.8x faster than KAT-Coder-Pro V2.5 (default).

تفصیلی موازنہ

میٹرک KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default اجرا: 2026-07-14 Beam 1.0 501B A23B Beam 1.0 501B A23B high اجرا: 2026-10-17
اسکور 6.1 6.1
درجہ #273 #266
اعتماد پذیری 10.0 10.0
تسلسل 7.1 8.3
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 68.1% 59.4%
غیر مستحکم ٹیسٹ 8 5
کل رنز 69 69
فی نتیجہ لاگت 4.419 6.126
کل لاگت $0.742 $0.674
ان پٹ قیمت $0.740 / 1M $1.000 / 1M
آؤٹ پٹ قیمت $2.960 / 1M $3.000 / 1M
کیش پڑھنے کی قیمت $0.150 / 1M $0.100 / 1M
کیش میں لکھنے کی قیمت دستیاب نہیں دستیاب نہیں
کل ان پٹ ٹوکنز 98,508 232,218
آؤٹ پٹ ٹوکنز 8,088 4,944
ریزننگ ٹوکنز 131,484 142,263
ردِعمل کا وقت (اوسط) 24.96s 9.03s
ردِعمل کا وقت (زیادہ سے زیادہ) 335.41s 36.04s
ردِعمل کا وقت (کل) 574.12s 207.67s
پیرامیٹرز ~700B کل (~72B فعال) 501B کل (23B فعال)
دستیابی بند ماخذ کھلا ماخذ

کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#273 KAT-Coder-Pro V2.5

default
لاگت
$0.010
وقت
29.0s
ٹوکنز
3,439 tok

#266 Beam 1.0 501B A23B

high
لاگت
$0.008
وقت
15.6s
ٹوکنز
6,162 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 451 21,989
Beam 1.0 501B A23B 8.4 7.4 88.9% 1 21.05s 7,800 559 44,608

موازنہ کی جوڑی تبدیل کریں