نیویگیشن
Advertise here

Ember-1 (max) vs GPT-5.4

Ember-1 (max) average score میں آگے ہے: 5.9 vs 5.8. GPT-5.4 کی benchmark لاگت کم ہے: $0.397 vs $2.792. GPT-5.4 تیز ہے: 2.08s vs 98.92s، pass rates 57.6% vs 34.9%.

بینچ مارکس AI BENCHY ٹیسٹ سوئٹس سے اس وقت تیار کیے گئے: 2026-09-28

موازنہ کیے گئے ماڈلز

درجہ
#248
کل آؤٹ پٹ ٹوکنز
180,806
ردِعمل کا وقت (اوسط)
98.92s
کل لاگت
$2.792
درجہ
#254
کل آؤٹ پٹ ٹوکنز
8,339
ردِعمل کا وقت (اوسط)
2.08s
کل لاگت
$0.397
تجویز کردہ ماڈل GPT-5.4

Its score stays close to the best score here (5.8 vs 5.9), while costing about 7.0x less than Ember-1 (max).

تفصیلی موازنہ

میٹرک Ember-1 Ember-1 max اجرا: 2026-09-28 GPT-5.4 GPT-5.4 none اجرا: 2026-03-05
اسکور 5.9 5.8
درجہ #248 #254
اعتماد پذیری 7.5 10.0
تسلسل 7.7 9.2
کوششیں 66/66 66/66
درست ٹیسٹس
فی کوشش کامیابی کی شرح 57.6% 34.9%
غیر مستحکم ٹیسٹ 6 2
کل رنز 66 66
فی نتیجہ لاگت 27.915 5.667
کل لاگت $2.792 $0.397
ان پٹ قیمت $3.000 / 1M $2.500 / 1M
آؤٹ پٹ قیمت $15.000 / 1M $15.000 / 1M
کل ان پٹ ٹوکنز 26,449 108,641
آؤٹ پٹ ٹوکنز 4,183 8,339
ریزننگ ٹوکنز 176,623 0
ردِعمل کا وقت (اوسط) 98.92s 2.08s
ردِعمل کا وقت (زیادہ سے زیادہ) 587.08s 15.63s
ردِعمل کا وقت (کل) 2176.20s 45.75s
پیرامیٹرز ~2.8T کل (~104B فعال) ~1.5T کل (~100B فعال)
دستیابی بند ماخذ بند ماخذ

ماڈل جنریشن شوکیس

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#248 Ember-1

max
لاگت
$0.163
وقت
229.4s
ٹوکنز
11,002 tok

#254 GPT-5.4

none
لاگت
$0.026
وقت
18.1s
ٹوکنز
1,792 tok

اسکور کے لحاظ سے سرفہرست ماڈلز

اسکور بمقابلہ کل لاگت

ردِعمل کا وقت (اوسط)

اسکور vs ردِعمل کا وقت (اوسط)

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

زمرہ وار تفصیل

کوڈنگ اسکور تسلسل فی کوشش کامیابی کی شرح غیر مستحکم ٹیسٹ درست ٹیسٹس ردِعمل کا وقت (اوسط) ان پٹ ٹوکنز آؤٹ پٹ ٹوکنز ریزننگ ٹوکنز
Ember-1 5.2 4.4 55.6% 2 105.09s 3,362 1,149 27,957
GPT-5.4 5.5 10.0 33.3% 0 1.62s 7,305 516 0

فوری موازنہ

موازنہ کی جوڑی تبدیل کریں