AI BENCHY
Advertise here
#173

KAT-Coder-Air V2.5

Kwaipilot اجرا: 2026-07-14 ٹیسٹ کیا گیا: 2026-07-16 23:35 kwaipilot/kat-coder-air-v2.5::high

خلاصہ

KAT-Coder-Air V2.5 AI BENCHY پر 5.6 اسکور کرتا ہے اور #173 پر ہے۔ اس کی reliability 9.9، pass rate 43.9%، کل لاگت $0.077، اور اوسط response time 15.90s ہے۔

KAT-Coder-Air V2.5 کو منفرد کیا بناتا ہے: یہ مشترکہ میں سب سے نمایاں ہے، جہاں اس کا rank #1 ہے؛ جبکہ ڈیٹا پارسنگ اور استخراج اس کا کمزور ترین حصہ ہے، rank #11. یہ غیر معمولی طور پر زیادہ reasoning tokens استعمال کرتا ہے، جو سست یا مہنگے runs کی وجہ ہو سکتی ہے۔

تسلسل

7.7

کل آؤٹ پٹ ٹوکنز

115,331

کل ان پٹ ٹوکنز

50,470

ان پٹ قیمت

$0.150 / 1M

آؤٹ پٹ قیمت

$0.600 / 1M

درست ٹیسٹس

غلط ٹیسٹس: 15

فی کوشش کامیابی کی شرح: 43.9%

غیر مستحکم ٹیسٹ

6

غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).

ردِعمل کا وقت (اوسط)

15.90s

ردِعمل کا وقت (زیادہ سے زیادہ): 118.35s

ردِعمل کا وقت (کل): 349.71s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#173 KAT-Coder-Air V2.5

high
غلط SVG
لاگت
$0.000
وقت
300.0s
ٹوکنز
0 tok

رن ہسٹری

ٹیسٹ کیا گیا اسکور اعتماد پذیری درست ٹیسٹس کل لاگت موازنہ کریں
2026-07-16 23:35 نیا ٹیسٹ شامل ہوا 5.6 9.9 $0.077 موجودہ رن
2026-07-14 11:05 پہلا رن 6.2 9.7 $0.064 موازنہ کریں

اس رن میں مختلف بینچ مارک سوٹ استعمال ہوا تھا۔ تاریخی تبدیلی سمجھتے وقت سوٹ کی تبدیلی کو بھی ذہن میں رکھیں۔

قیمت کی تاریخ

OpenRouter سے اس ماڈل کے تاریخی قیمت کے اعداد و شمار۔

تاریخ ان پٹ قیمت آؤٹ پٹ قیمت
2026-07-14 11:25 $0.150 / 1M $0.600 / 1M

چارٹس

پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

زمرہ اسکور تسلسل درست ٹیسٹس
اینٹی اے آئی چالیں 6.9 5.8
کوڈنگ 4.3 7.3
مشترکہ 6.5 10.0
ڈیٹا پارسنگ اور استخراج 6.5 10.0
ڈومین مخصوص 2.9 7.2
عمومی ذہانت 5.1 10.0
ہدایات کی پیروی 9.8 10.0
پہیلی حل کرنا 3.5 4.4
ٹول کالنگ 10.0 10.0
معلومات عامہ 3.0 10.0

موازنہ کیے گئے ماڈلز