Ember-1 (high) vs Gemini 3.7 Flash (low)

Model yang Dibandingkan

Peringkat: #196
Total token output: 121,223
Waktu respons (rata-rata): 58.14s
Total Biaya: $2.405

Peringkat: #26
Total token output: 38,453
Waktu respons (rata-rata): 6.24s
Total Biaya: $0.183

Model yang direkomendasikan Gemini 3.7 Flash (low)

It has the best score here (9.4), while costing about 13.2x less than Ember-1 (high).

Perbandingan terperinci

Metrik	Ember-1 Ember-1 high Rilis: 2026-09-28	Gemini 3.7 Flash Gemini 3.7 Flash low Rilis: 2026-08-14

Metrik	Ember-1 Ember-1 high Rilis: 2026-09-28	Gemini 3.7 Flash Gemini 3.7 Flash low Rilis: 2026-08-14
Skor	6.9	9.4
Peringkat	#196	#26
Keandalan	8.6	10.0
Konsistensi	7.2	9.3
Percobaan	69/69	69/69
Tes benar
Tingkat lulus per percobaan	71.0%	95.7%
Tes tidak stabil	8	2
Total Run	69	69
Biaya per hasil	20.041	0.868
Total Biaya	$2.405	$0.183
Harga input	$3.000 / 1M	$0.750 / 1M
Harga output	$15.000 / 1M	$3.750 / 1M
Harga baca cache	$0.300 / 1M	$0.075 / 1M
Harga tulis cache	T/A	$0.042 / 1M
Total token input	195,489	188,519
Token output	12,475	7,694
Token penalaran	108,748	30,759
Waktu respons (rata-rata)	58.14s	6.24s
Waktu respons (maks)	255.06s	58.75s
Waktu respons (total)	1337.19s	143.56s
Parameter	~2.8T total (~104B aktif)	~500B total (~20B aktif)
Ketersediaan	Tertutup	Tertutup

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#196 Ember-1

high

Biaya: $0.038
Waktu: 55.1s
Token: 2,671 tok

#26 Gemini 3.7 Flash

low

Biaya: $0.010
Waktu: 23.5s
Token: 5,210 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Tugas agen	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.1	3.1	66.7%	1		88.31s	146,912	5,130	5,968
Gemini 3.7 Flash	10.0	10.0	100.0%	0		58.75s	98,197	1,400	0

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	8.7	7.9	91.7%	1		24.05s	1,544	886	992
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.54s	492	99	1,398

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	8.2	7.2	88.9%	1		72.23s	7,144	1,281	23,093
Gemini 3.7 Flash	7.6	7.2	77.8%	1		6.20s	8,118	461	11,508

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.4	5.8	66.7%	1		79.89s	28,994	1,667	6,614
Gemini 3.7 Flash	10.0	10.0	100.0%	0		13.00s	66,250	4,873	8,108

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	7.3	5.9	83.3%	1		36.10s	6,076	230	1,228
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.15s	7,548	278	1,093

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	2.9	4.4	22.2%	2		175.49s	1,154	1,023	61,582
Gemini 3.7 Flash	8.2	7.2	88.9%	1		3.09s	642	12	3,029

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		4.49s	744	194	304
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.76s	486	81	1,043

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	7.1	5.8	83.3%	1		33.38s	992	162	784
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.47s	615	72	1,778

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		4.84s	1,452	390	848
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.92s	558	166	1,580

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		26.45s	0	0	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		4.10s	5,457	241	160

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		65.34s	477	1,512	7,335
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.92s	156	11	1,062

Ganti Pasangan Perbandingan

Claude Opus 5highvsGemini 3.7 Flashlow Ember-1highvsGemini 3.1 Flash Litemedium Claude Opus 5mediumvsGemini 3.7 Flashlow Ember-1highvsGemma 4 31BmediumTersedia gratis Ember-1highvsGPT-5.6 Lunalow Claude Sonnet 5.5lowvsEmber-1high Claude Opus 4.8nonevsEmber-1high Claude Opus 5.5highvsGemini 3.7 Flashlow Ember-1highvsKimi K2.6medium Ember-1highvsMinimax M3.1 FlashmaxTersedia gratis Ember-1highvsQwen3.5-Flashmedium Ember-1highvsInklinglowTersedia gratis