Ember-1 (max) vs GPT-5 Nano (medium)

Model yang Dibandingkan

Model yang direkomendasikan GPT-5 Nano (medium)

It has the best score here (6.0), while costing about 23.7x less than Ember-1 (max).

Metrik	Ember-1 Ember-1 max Rilis: 2026-09-28	GPT-5 Nano GPT-5 Nano medium Rilis: 2025-08-07

Metrik	Ember-1 Ember-1 max Rilis: 2026-09-28	GPT-5 Nano GPT-5 Nano medium Rilis: 2025-08-07
Skor	5.9	6.0
Peringkat	#248	#242
Keandalan	7.5	10.0
Konsistensi	7.7	6.6
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	57.6%	54.5%
Tes tidak stabil	6	9
Total Run	66	66
Biaya per hasil	27.915	1.472
Total Biaya	$2.792	$0.118
Harga input	$3.000 / 1M	$0.050 / 1M
Harga output	$15.000 / 1M	$0.400 / 1M
Total token input	26,449	94,944
Token output	4,183	12,037
Token penalaran	176,623	270,400
Waktu respons (rata-rata)	98.92s	54.20s
Waktu respons (maks)	587.08s	227.89s
Waktu respons (total)	2176.20s	867.23s
Parameter	~2.8T total (~104B aktif)	~120B total (~5B aktif)
Ketersediaan	Tertutup	Tertutup

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

max

medium

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	8.7	7.9	91.7%	1		23.74s	1,533	613	1,394
GPT-5 Nano	6.5	7.9	58.3%	1		25.50s	606	1,221	21,184

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	5.2	4.4	55.6%	2		105.09s	3,362	1,149	27,957
GPT-5 Nano	7.0	7.7	55.6%	1		41.62s	7,305	740	41,152

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.5	10.0	50.0%	0		64.37s	12,819	775	4,538
GPT-5 Nano	6.4	5.8	66.7%	1		146.93s	71,846	7,156	86,976

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.4	5.9	66.7%	1		39.79s	4,285	185	1,182
GPT-5 Nano	3.7	1.7	50.0%	2		21.42s	7,140	453	10,560

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.6	7.2	22.2%	1		471.21s	1,015	84	136,143
GPT-5 Nano	3.4	1.6	44.4%	3		124.13s	628	232	73,792

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		7.04s	741	193	716
GPT-5 Nano	4.1	10.0	0.0%	0		17.51s	477	202	4,608

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.2	5.8	66.7%	1		32.97s	777	132	574
GPT-5 Nano	9.8	10.0	100.0%	0		15.64s	660	312	4,736

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	7.7	10.0	66.7%	0		6.57s	1,443	681	1,368
GPT-5 Nano	5.3	7.2	44.4%	1		20.63s	642	929	14,272

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		26.36s	0	0	0
GPT-5 Nano	10.0	10.0	100.0%	0		33.30s	5,445	558	6,976

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		24.95s	474	371	2,751
GPT-5 Nano	3.0	10.0	0.0%	0		20.13s	195	234	6,144

Ganti Pasangan Perbandingan