Ember-1 (low) vs Step 5 Preview (high)

Model yang Dibandingkan

Peringkat: #168
Total token output: 56,766
Waktu respons (rata-rata): 34.90s
Total Biaya: $1.488

Peringkat: #169
Total token output: 1,581,325
Waktu respons (rata-rata): 154.41s
Total Biaya: $4.513

Model yang direkomendasikan Ember-1 (low)

It has the best score here (7.0), while costing about 3.0x less than Step 5 Preview (high).

Perbandingan terperinci

Metrik	Ember-1 Ember-1 low Rilis: 2026-09-28	Step 5 Preview Step 5 Preview high Rilis: 2026-10-09

Metrik	Ember-1 Ember-1 low Rilis: 2026-09-28	Step 5 Preview Step 5 Preview high Rilis: 2026-10-09
Skor	7.0	7.0
Peringkat	#168	#169
Keandalan	8.8	9.5
Konsistensi	8.2	8.5
Percobaan	69/69	69/69
Tes benar
Tingkat lulus per percobaan	65.2%	52.2%
Tes tidak stabil	5	4
Total Run	69	69
Biaya per hasil	11.441	45.130
Total Biaya	$1.488	$4.513
Harga input	$3.000 / 1M	$1.000 / 1M
Harga output	$15.000 / 1M	$2.700 / 1M
Harga baca cache	$0.300 / 1M	$0.050 / 1M
Harga tulis cache	T/A	T/A
Total token input	211,908	243,381
Token output	14,158	1,581,325
Token penalaran	42,608	0
Waktu respons (rata-rata)	34.90s	154.41s
Waktu respons (maks)	121.29s	455.72s
Waktu respons (total)	802.79s	3551.40s
Parameter	~2.8T total (~104B aktif)	600B total (27B aktif)
Ketersediaan	Tertutup	Tertutup

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#168 Ember-1

low

Biaya: $0.016
Waktu: 24.2s
Token: 1,165 tok

#169 Step 5 Preview

high

Biaya: $0.057
Waktu: 150.1s
Token: 20,970 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Tugas agen	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	4.7	3.1	33.3%	1		121.29s	178,897	9,378	9,921
Step 5 Preview	10.0	10.0	100.0%	0		55.73s	150,653	10,088	0

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	8.2	7.9	83.3%	1		22.18s	1,402	571	613
Step 5 Preview	6.5	8.0	58.3%	1		14.70s	684	11,701	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		37.91s	8,097	2,518	13,142
Step 5 Preview	2.9	10.0	0.0%	0		421.68s	7,383	576,000	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.5	10.0	50.0%	0		51.45s	12,828	381	689
Step 5 Preview	10.0	10.0	100.0%	0		115.30s	66,481	98,423	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	7.3	5.9	83.3%	1		34.82s	6,076	223	778
Step 5 Preview	10.0	10.0	100.0%	0		6.55s	7,362	4,589	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	2.9	7.2	11.1%	1		56.17s	1,154	234	12,476
Step 5 Preview	3.0	10.0	0.0%	0		333.41s	783	479,743	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		5.67s	744	139	462
Step 5 Preview	3.4	9.3	0.0%	0		36.56s	507	5,684	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.2	5.8	66.7%	1		32.73s	781	121	466
Step 5 Preview	7.3	5.8	83.3%	1		20.53s	699	5,503	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		3.27s	1,452	393	595
Step 5 Preview	5.8	4.4	66.7%	2		143.16s	702	196,941	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		26.43s	0	0	0
Step 5 Preview	10.0	10.0	100.0%	0		4.34s	7,908	653	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		30.60s	477	200	3,466
Step 5 Preview	3.0	10.0	0.0%	0		416.44s	219	192,000	0

Ganti Pasangan Perbandingan

Qwen3.5-122B-A10BmediumvsStep 5 Previewhigh Ember-1lowvsKimi K2.7 Codemedium Step 5 PreviewhighvsGrok 4.6low Gemini 3 Flash PreviewlowvsStep 5 Previewhigh Muse Glimmer 30BlowvsStep 5 Previewhigh Ember-1lowvsGemini 3.1 Flash Lite Previewmedium Ember-1lowvsQwen3.5-122B-A10Bmedium Kimi K2.7 CodemediumvsStep 5 Previewhigh Gemini 3.1 Flash Lite PreviewmediumvsStep 5 Previewhigh Ember-1lowvsGPT-5.2 Chatdefault GPT-5.2 ChatdefaultvsStep 5 Previewhigh Ember-1lowvsMiMo-V2.5medium