التنقل
Advertise here

Ember-1 (max) vs GPT-5.4

يتقدم Ember-1 (max) في متوسط النتيجة بـ 5.9 مقابل 5.8. لدى GPT-5.4 تكلفة benchmark أقل عند $0.397 مقابل $2.792. GPT-5.4 أسرع عند 2.08s مقابل 98.92s، مع معدلات نجاح 57.6% مقابل 34.9%.

تم إنشاء نتائج المعايير من مجموعات اختبارات AI BENCHY في: 2026-09-28

النماذج المقارنة

الترتيب
#248
إجمالي رموز الإخراج
180,806
زمن الاستجابة (المتوسط)
98.92s
إجمالي التكلفة
$2.792
الترتيب
#254
إجمالي رموز الإخراج
8,339
زمن الاستجابة (المتوسط)
2.08s
إجمالي التكلفة
$0.397
النموذج الموصى به GPT-5.4

Its score stays close to the best score here (5.8 vs 5.9), while costing about 7.0x less than Ember-1 (max).

مقارنة تفصيلية

المقياس Ember-1 Ember-1 max الإصدار: 2026-09-28 GPT-5.4 GPT-5.4 none الإصدار: 2026-03-05
النتيجة 5.9 5.8
الترتيب #248 #254
الموثوقية 7.5 10.0
الاتساق 7.7 9.2
محاولات 66/66 66/66
اختبارات صحيحة
معدل النجاح لكل محاولة 57.6% 34.9%
اختبارات غير مستقرة 6 2
إجمالي مرات التشغيل 66 66
التكلفة لكل نتيجة 27.915 5.667
إجمالي التكلفة $2.792 $0.397
سعر الإدخال $3.000 / 1M $2.500 / 1M
سعر الإخراج $15.000 / 1M $15.000 / 1M
إجمالي رموز الإدخال 26,449 108,641
رموز الإخراج 4,183 8,339
رموز الاستدلال 176,623 0
زمن الاستجابة (المتوسط) 98.92s 2.08s
زمن الاستجابة (الحد الأقصى) 587.08s 15.63s
زمن الاستجابة (الإجمالي) 2176.20s 45.75s
المعلمات ~2.8T الإجمالي (~104B النشطة) ~1.5T الإجمالي (~100B النشطة)
الإتاحة مغلق المصدر مغلق المصدر

عرض إنشاء النماذج

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#248 Ember-1

max
التكلفة
$0.163
الوقت
229.4s
الرموز
11,002 tok

#254 GPT-5.4

none
التكلفة
$0.026
الوقت
18.1s
الرموز
1,792 tok

أفضل النماذج حسب الدرجة

الدرجة مقابل التكلفة الإجمالية

زمن الاستجابة (المتوسط)

النتيجة vs زمن الاستجابة (المتوسط)

إجمالي رموز الإخراج

النتيجة vs إجمالي رموز الإخراج

تفصيل الفئات

البرمجة النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
Ember-1 5.2 4.4 55.6% 2 105.09s 3,362 1,149 27,957
GPT-5.4 5.5 10.0 33.3% 0 1.62s 7,305 516 0

مقارنة سريعة

تبديل زوج المقارنة