Navigasi
Advertise here

Ember-1 (max) vs GPT-5.4 Mini

Skor rata-rata hampir imbang di 5.9 vs 5.9. GPT-5.4 Mini memiliki biaya benchmark lebih rendah di $0.095 vs $2.792. GPT-5.4 Mini lebih cepat di 1.58s vs 98.92s, dengan tingkat keberhasilan 57.6% vs 31.8%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-28

Model yang Dibandingkan

Peringkat
#248
Total token output
180,806
Waktu respons (rata-rata)
98.92s
Total Biaya
$2.792
Peringkat
#251
Total token output
7,898
Waktu respons (rata-rata)
1.58s
Total Biaya
$0.095
Model yang direkomendasikan GPT-5.4 Mini

It has the best score here (5.9), while costing about 29.4x less than Ember-1 (max).

Perbandingan terperinci

Metrik Ember-1 Ember-1 max Rilis: 2026-09-28 GPT-5.4 Mini GPT-5.4 Mini none Rilis: 2026-03-17
Skor 5.9 5.9
Peringkat #248 #251
Keandalan 7.5 10.0
Konsistensi 7.7 9.3
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 57.6% 31.8%
Tes tidak stabil 6 2
Total Run 66 66
Biaya per hasil 27.915 1.581
Total Biaya $2.792 $0.095
Harga input $3.000 / 1M $0.750 / 1M
Harga output $15.000 / 1M $4.500 / 1M
Total token input 26,449 79,076
Token output 4,183 7,898
Token penalaran 176,623 0
Waktu respons (rata-rata) 98.92s 1.58s
Waktu respons (maks) 587.08s 9.92s
Waktu respons (total) 2176.20s 34.86s
Parameter ~2.8T total (~104B aktif) ~400B total (~17B aktif)
Ketersediaan Tertutup Tertutup

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#248 Ember-1

max
Biaya
$0.163
Waktu
229.4s
Token
11,002 tok

#251 GPT-5.4 Mini

none
Biaya
$0.010
Waktu
11.7s
Token
2,151 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Ember-1 5.2 4.4 55.6% 2 105.09s 3,362 1,149 27,957
GPT-5.4 Mini 5.5 10.0 33.3% 0 913ms 7,305 401 0

Perbandingan Cepat

Ganti Pasangan Perbandingan