AI BENCHY
Advertise here
#15

Grok 4.20 Beta

X AI اجرا: 2026-03-12 ٹیسٹ کیا گیا: 2026-05-06 14:15 x-ai/grok-4.20-beta::medium
(medium) (none)

خلاصہ

Grok 4.20 Beta AI BENCHY پر 8.2 اسکور کرتا ہے اور #15 پر ہے۔ اس کی reliability دستیاب نہیں، pass rate 79.6%، کل لاگت $0.633، اور اوسط response time 9.81s ہے۔

آرکائیو شدہ ماڈل: اس ماڈل کو اب اپ ڈیٹ نہیں کیا جائے گا اور نئے ٹیسٹس پر ٹیسٹ نہیں کیا جائے گا

شناختی نوٹ

Grok 4.20 Beta، xAI: Grok 4.20 کا پری ویو ورژن تھا۔

تسلسل

9.1

اعتماد پذیری

دستیاب نہیں

کل آؤٹ پٹ ٹوکنز

93,477

کل ان پٹ ٹوکنز

0

ان پٹ قیمت

$0.000 / 1M

آؤٹ پٹ قیمت

$0.000 / 1M

درست ٹیسٹس

غلط ٹیسٹس: 5

فی کوشش کامیابی کی شرح: 79.6%

غیر مستحکم ٹیسٹ

2

غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).

ردِعمل کا وقت (اوسط)

9.81s

ردِعمل کا وقت (زیادہ سے زیادہ): 31.36s

ردِعمل کا وقت (کل): 176.62s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#15 Grok 4.20 Beta

medium
Cost
$0.034
Time
91.0s
Tokens
13,523 tok

رن ہسٹری

ٹیسٹ کیا گیا اسکور اعتماد پذیری درست ٹیسٹس کل لاگت موازنہ کریں
2026-05-06 14:15 دوبارہ ٹیسٹ 8.5 دستیاب نہیں $0.750 موازنہ کریں
2026-05-06 14:15 دوبارہ ٹیسٹ 8.2 دستیاب نہیں $0.633 موازنہ کریں
2026-05-06 14:15 دوبارہ ٹیسٹ 8.2 دستیاب نہیں $0.633 موجودہ رن
2026-05-06 14:15 سوٹ بدل گیا 8.2 دستیاب نہیں $0.633 موازنہ کریں
2026-04-11 01:19 پہلا ریکارڈ شدہ رن 8.0 دستیاب نہیں $0.633 موازنہ کریں

رن موازنہ

رناسکورتسلسلاعتماد پذیریدرست ٹیسٹسغیر مستحکم ٹیسٹکل آؤٹ پٹ ٹوکنزکل ان پٹ ٹوکنزکل لاگتردِعمل کا وقت (اوسط)
2026-05-06 14:15 · دوبارہ ٹیسٹ8.29.1دستیاب نہیں13/18293,4770$0.6339.81s
2026-04-11 01:19 · پہلا ریکارڈ شدہ رن8.09.1دستیاب نہیں12/18293,4770$0.6339.81s
فرق+0.20.0+1000$0.0000ms

ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔

چارٹس

پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

زمرہ اسکور تسلسل درست ٹیسٹس
اینٹی اے آئی چالیں 8.7 7.9
کوڈنگ 10.0 10.0
مشترکہ 10.0 10.0
ڈیٹا پارسنگ اور استخراج 10.0 10.0
ڈومین مخصوص 5.3 10.0
عمومی ذہانت 10.0 10.0
ہدایات کی پیروی 9.8 10.0
پہیلی حل کرنا 8.2 7.2
ٹول کالنگ 3.0 10.0

موازنہ کیے گئے ماڈلز