AI BENCHY
Advertise here
#47

Claude Sonnet 4.6

Anthropic اجرا: 2026-02-17 ٹیسٹ کیا گیا: 2026-04-11 01:44 anthropic/claude-sonnet-4.6::none
~1T کل (~100B فعال)MoEبند ماخذتخمینہ
(medium) (none)

خلاصہ

Claude Sonnet 4.6 AI BENCHY پر 7.4 اسکور کرتا ہے اور #47 پر ہے۔ اس کی reliability دستیاب نہیں، pass rate 64.8%، کل لاگت $0.262، اور اوسط response time 4.98s ہے۔

Claude Sonnet 4.6 کو منفرد کیا بناتا ہے: یہ ڈومین مخصوص میں سب سے نمایاں ہے، جہاں اس کا rank #1 ہے؛ جبکہ اینٹی اے آئی چالیں اس کا کمزور ترین حصہ ہے، rank #18. یہ ملتے جلتے models کے مقابلے میں نمایاں طور پر تیز ہے۔

ماڈل کی تفصیلات

تحقیق کی تاریخ: 2026-08-12

تخمینہ
پیرامیٹرز
~1T کل (~100B فعال)
ساخت
MoE
دستیابی
بند ماخذ
لائسنس
-

عوامی شواہد کی بنیاد پر بہترین تخمینہ؛ فراہم کنندہ نے تمام اقدار ظاہر نہیں کیں۔

تسلسل

9.6

اعتماد پذیری

دستیاب نہیں

کل آؤٹ پٹ ٹوکنز

7,433

کل ان پٹ ٹوکنز

0

ان پٹ قیمت

$3.000 / 1M

آؤٹ پٹ قیمت

$15.000 / 1M

درست ٹیسٹس

غلط ٹیسٹس: 7

فی کوشش کامیابی کی شرح: 64.8%

غیر مستحکم ٹیسٹ

1

غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).

ردِعمل کا وقت (اوسط)

4.98s

ردِعمل کا وقت (زیادہ سے زیادہ): 23.84s

ردِعمل کا وقت (کل): 54.83s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#47 Claude Sonnet 4.6

none
لاگت
$0.038
وقت
27.3s
ٹوکنز
2,598 tok

رن ہسٹری

ٹیسٹ کیا گیا اسکور اعتماد پذیری درست ٹیسٹس کل لاگت موازنہ کریں
2026-08-14 02:00 دوبارہ ٹیسٹ 7.3 10.0 $0.661 موازنہ کریں
2026-07-16 22:21 نیا ٹیسٹ شامل ہوا 7.3 10.0 $0.661 موازنہ کریں
2026-06-04 13:40 نیا ٹیسٹ شامل ہوا 6.8 10.0 $0.316 موازنہ کریں
2026-05-22 00:12 سوٹ بدل گیا 7.0 10.0 $0.306 موازنہ کریں
2026-04-11 01:44 پہلا ریکارڈ شدہ رن 7.4 دستیاب نہیں $0.262 موجودہ رن

رن موازنہ

رنبینچ مارک کوریجاسکورتسلسلاعتماد پذیریدرست ٹیسٹسغیر مستحکم ٹیسٹکل آؤٹ پٹ ٹوکنزکل ان پٹ ٹوکنزکل لاگتردِعمل کا وقت (اوسط)
2026-04-11 01:44 · پہلا ریکارڈ شدہ رن54/54 کوششیں7.49.6دستیاب نہیں11/1817,4330$0.2624.98s
2026-05-22 00:12 · سوٹ بدل گیا60/60 کوششیں7.09.710.011/2019,4530$0.3065.33s
فرق+0.4-0.100-20200-$0.045-345ms

بینچ مارک کوریج مختلف ہے: 54/54 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔) بمقابلہ 60/60 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔)۔ مجموعے اور تکرار سے متاثر ہونے والے پیمانے براہ راست قابل موازنہ نہیں ہیں۔

ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔

چارٹس

پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

زمرہ اسکور تسلسل درست ٹیسٹس
اینٹی اے آئی چالیں 4.8 10.0
کوڈنگ 10.0 10.0
مشترکہ 9.5 10.0
ڈیٹا پارسنگ اور استخراج 10.0 10.0
ڈومین مخصوص 7.7 10.0
عمومی ذہانت 6.1 3.1
ہدایات کی پیروی 6.5 10.0
پہیلی حل کرنا 7.7 10.0
ٹول کالنگ 10.0 10.0

موازنہ کیے گئے ماڈلز