نیویگیشن
Advertise here

Ember-1 (max) vs GPT 5.3 Chat (default)

average score تقریباً برابر ہے: 6.7 vs 6.7. GPT 5.3 Chat (default) کی benchmark لاگت کم ہے: $0.533 vs $3.264. GPT 5.3 Chat (default) تیز ہے: 6.31s vs 97.34s، pass rates 59.4% vs 62.3%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-11-13

موازنہ کیے گئے ماڈلز

درجہ
#254
کل آؤٹ پٹ ٹوکنز
186,901
ردِعمل کا وقت (اوسط)
97.34s
کل لاگت
$3.264
درجہ
#255
کل آؤٹ پٹ ٹوکنز
28,179
ردِعمل کا وقت (اوسط)
6.31s
کل لاگت
$0.533
تجویز کردہ ماڈل GPT 5.3 Chat (default)

It has the best score here (6.7), while costing about 6.1x less than Ember-1 (max).

تفصیلی موازنہ

میٹرک Ember-1 Ember-1 max اجرا: 2026-09-28 GPT 5.3 Chat GPT 5.3 Chat default اجرا: 2026-03-03
اسکور 6.7 6.7
درجہ #254 #255
اعتماد پذیری 8.3 10.0
تسلسل 7.8 8.6
کوششیں 69/69 69/69
درست ٹیسٹس
فی کوشش کامیابی کی شرح 59.4% 62.3%
غیر مستحکم ٹیسٹ 6 4
کل رنز 69 69
فی نتیجہ لاگت 29.671 4.097
کل لاگت $3.264 $0.533
ان پٹ قیمت $3.000 / 1M $1.750 / 1M
آؤٹ پٹ قیمت $15.000 / 1M $14.000 / 1M
کیش پڑھنے کی قیمت $0.300 / 1M دستیاب نہیں
کیش میں لکھنے کی قیمت دستیاب نہیں دستیاب نہیں
کل ان پٹ ٹوکنز 153,399 78,846
آؤٹ پٹ ٹوکنز 7,803 7,635
ریزننگ ٹوکنز 179,098 20,544
ردِعمل کا وقت (اوسط) 97.34s 6.31s
ردِعمل کا وقت (زیادہ سے زیادہ) 587.08s 18.33s
ردِعمل کا وقت (کل) 2238.73s 138.73s
پیرامیٹرز ~2.8T کل (~104B فعال) ~400B کل (~17B فعال)
دستیابی بند ماخذ بند ماخذ

کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#254 Ember-1

max
لاگت
$0.163
وقت
229.4s
ٹوکنز
11,002 tok

#255 GPT 5.3 Chat

default
لاگت
$0.008
وقت
8.1s
ٹوکنز
634 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Ember-1 5.2 4.4 55.6% 2 105.09s 3,362 1,149 27,957
GPT 5.3 Chat 5.6 4.7 55.6% 2 10.52s 7,302 808 5,824

موازنہ کی جوڑی تبدیل کریں