AI BENCHY
Advertise here
#126

KAT-Coder-Pro V2.5

Kwaipilot اجرا: 2026-07-14 ٹیسٹ کیا گیا: 2026-08-14 03:24 kwaipilot/kat-coder-pro-v2.5::medium
~700B کل (~72B فعال)MoEبند ماخذتخمینہ
(high) (medium) (low) (none)

خلاصہ

KAT-Coder-Pro V2.5 AI BENCHY پر 6.9 اسکور کرتا ہے اور #126 پر ہے۔ اس کی reliability 10.0، pass rate 65.2%، کل لاگت $0.478، اور اوسط response time 24.87s ہے۔

KAT-Coder-Pro V2.5 کو منفرد کیا بناتا ہے: یہ کوڈنگ میں سب سے نمایاں ہے، جہاں اس کا rank #4 ہے؛ جبکہ ڈیٹا پارسنگ اور استخراج اس کا کمزور ترین حصہ ہے، rank #14.

ماڈل کی تفصیلات

تحقیق کی تاریخ: 2026-08-12

تخمینہ
پیرامیٹرز
~700B کل (~72B فعال)
ساخت
MoE
دستیابی
بند ماخذ
لائسنس
-

عوامی شواہد کی بنیاد پر بہترین تخمینہ؛ فراہم کنندہ نے تمام اقدار ظاہر نہیں کیں۔

تسلسل

7.0

کل آؤٹ پٹ ٹوکنز

139,375

کل ان پٹ ٹوکنز

87,916

ان پٹ قیمت

$0.740 / 1M

آؤٹ پٹ قیمت

$2.960 / 1M

درست ٹیسٹس

غلط ٹیسٹس: 11

فی کوشش کامیابی کی شرح: 65.2%

غیر مستحکم ٹیسٹ

8

غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).

ردِعمل کا وقت (اوسط)

24.87s

ردِعمل کا وقت (زیادہ سے زیادہ): 257.00s

ردِعمل کا وقت (کل): 547.14s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#126 KAT-Coder-Pro V2.5

medium
لاگت
$0.009
وقت
25.6s
ٹوکنز
2,939 tok

رن ہسٹری

ٹیسٹ کیا گیا اسکور اعتماد پذیری درست ٹیسٹس کل لاگت موازنہ کریں
2026-08-14 03:24 دوبارہ ٹیسٹ 6.9 10.0 $0.478 موجودہ رن
2026-07-16 23:47 نیا ٹیسٹ شامل ہوا 6.9 10.0 $0.467 موازنہ کریں
2026-07-14 11:05 پہلا رن 7.5 10.0 $0.275 موازنہ کریں

اس رن میں مختلف بینچ مارک سوٹ استعمال ہوا تھا۔ تاریخی تبدیلی سمجھتے وقت سوٹ کی تبدیلی کو بھی ذہن میں رکھیں۔

رن موازنہ

رنبینچ مارک کوریجاسکورتسلسلاعتماد پذیریدرست ٹیسٹسغیر مستحکم ٹیسٹکل آؤٹ پٹ ٹوکنزکل ان پٹ ٹوکنزکل لاگتردِعمل کا وقت (اوسط)
2026-08-14 03:24 · موجودہ رن66/66 کوششیں6.97.010.011/228139,37587,916$0.47824.87s
2026-07-16 23:47 · نیا ٹیسٹ شامل ہوا66/66 کوششیں6.97.410.011/227135,46487,907$0.46724.04s
فرق0.0-0.40.00+1+3911+9+$0.012+828ms

ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔

قیمت کی تاریخ

OpenRouter سے اس ماڈل کے تاریخی قیمت کے اعداد و شمار۔

تاریخ ان پٹ قیمت آؤٹ پٹ قیمت
2026-08-14 12:51 $0.740 / 1M $2.960 / 1M

چارٹس

پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

زمرہ اسکور تسلسل درست ٹیسٹس
اینٹی اے آئی چالیں 8.2 7.9
کوڈنگ 7.8 10.0
مشترکہ 6.4 5.8
ڈیٹا پارسنگ اور استخراج 7.3 5.9
ڈومین مخصوص 2.9 4.4
عمومی ذہانت 4.7 3.1
ہدایات کی پیروی 9.9 10.0
پہیلی حل کرنا 5.9 4.5
ٹول کالنگ 10.0 10.0
معلومات عامہ 3.0 10.0

موازنہ کیے گئے ماڈلز