Ember-1 (max) vs Space Bunny Alpha (low)

Model yang Dibandingkan

Model yang direkomendasikan Space Bunny Alpha (low)

Its score stays close to the best score here (5.9 vs 5.9), while responding about 3.5x faster than Ember-1 (max).

Metrik	Ember-1 Ember-1 max Rilis: 2026-09-28	Space Bunny Alpha Space Bunny Alpha low Rilis: 2026-09-24

Metrik	Ember-1 Ember-1 max Rilis: 2026-09-28	Space Bunny Alpha Space Bunny Alpha low Rilis: 2026-09-24
Skor	5.9	5.9
Peringkat	#248	#253
Keandalan	7.5	10.0
Konsistensi	7.7	6.7
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	57.6%	54.5%
Tes tidak stabil	6	9
Total Run	66	66
Biaya per hasil	27.915	0.000
Total Biaya	$2.792	$0.000
Harga input	$3.000 / 1M	$0.000 / 1M
Harga output	$15.000 / 1M	$0.000 / 1M
Total token input	26,449	119,957
Token output	4,183	183,554
Token penalaran	176,623	0
Waktu respons (rata-rata)	98.92s	27.98s
Waktu respons (maks)	587.08s	340.88s
Waktu respons (total)	2176.20s	615.47s
Parameter	~2.8T total (~104B aktif)	-
Ketersediaan	Tertutup	Tertutup

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

max

low

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	8.7	7.9	91.7%	1		23.74s	1,533	613	1,394
Space Bunny Alpha	6.9	5.8	75.0%	2		2.75s	2,130	2,255	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	5.2	4.4	55.6%	2		105.09s	3,362	1,149	27,957
Space Bunny Alpha	5.6	4.7	55.6%	2		6.60s	8,493	5,897	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.5	10.0	50.0%	0		64.37s	12,819	775	4,538
Space Bunny Alpha	3.8	5.8	33.3%	1		12.17s	85,984	8,071	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.4	5.9	66.7%	1		39.79s	4,285	185	1,182
Space Bunny Alpha	10.0	10.0	100.0%	0		1.35s	7,890	401	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.6	7.2	22.2%	1		471.21s	1,015	84	136,143
Space Bunny Alpha	5.3	7.2	44.4%	1		65.69s	1,869	61,188	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		7.04s	741	193	716
Space Bunny Alpha	4.4	9.9	0.0%	0		2.78s	855	427	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.2	5.8	66.7%	1		32.97s	777	132	574
Space Bunny Alpha	4.4	2.7	33.3%	2		1.43s	1,425	351	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	7.7	10.0	66.7%	0		6.57s	1,443	681	1,368
Space Bunny Alpha	7.9	9.9	66.7%	0		3.51s	1,782	1,939	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		26.36s	0	0	0
Space Bunny Alpha	4.7	1.6	66.7%	1		3.48s	8,953	370	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		24.95s	474	371	2,751
Space Bunny Alpha	3.0	10.0	0.0%	0		340.88s	576	102,655	0

Ganti Pasangan Perbandingan