Ember-1 (low) vs Kimi K2.7 Code (medium)

Model yang Dibandingkan

Model yang direkomendasikan Ember-1 (low)

It has the best score here (7.5), while responding about 2.6x faster than Kimi K2.7 Code (medium).

Metrik	Ember-1 Ember-1 low Rilis: 2026-09-28	Kimi K2.7 Code Kimi K2.7 Code medium Rilis: 2026-06-12

Metrik	Ember-1 Ember-1 low Rilis: 2026-09-28	Kimi K2.7 Code Kimi K2.7 Code medium Rilis: 2026-06-12
Skor	7.5	7.4
Peringkat	#128	#139
Keandalan	8.1	10.0
Konsistensi	8.5	8.0
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	66.7%	63.6%
Tes tidak stabil	4	5
Total Run	66	66
Biaya per hasil	5.085	7.096
Total Biaya	$0.662	$0.668
Harga input	$3.000 / 1M	$0.657 / 1M
Harga output	$15.000 / 1M	$3.301 / 1M
Total token input	33,011	72,085
Token output	4,780	57,453
Token penalaran	32,687	182,093
Waktu respons (rata-rata)	30.98s	80.09s
Waktu respons (maks)	93.10s	365.80s
Waktu respons (total)	681.50s	1681.85s
Parameter	~2.8T total (~104B aktif)	1T total (32B aktif)
Ketersediaan	Tertutup	Bobot tersedia

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

low

medium

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	8.2	7.9	83.3%	1		22.18s	1,402	571	613
Kimi K2.7 Code	7.3	5.8	83.3%	2		11.56s	618	3,048	5,041

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		37.91s	8,097	2,518	13,142
Kimi K2.7 Code	7.8	9.3	66.7%	0		146.73s	4,650	1,864	25,635

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.5	10.0	50.0%	0		51.45s	12,828	381	689
Kimi K2.7 Code	7.3	5.8	83.3%	1		66.03s	57,353	3,642	21,308

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	7.3	5.9	83.3%	1		34.82s	6,076	223	778
Kimi K2.7 Code	10.0	10.0	100.0%	0		12.27s	7,014	248	2,569

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	2.9	7.2	11.1%	1		56.17s	1,154	234	12,476
Kimi K2.7 Code	3.7	6.5	22.2%	1		184.17s	443	29,311	66,939

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		5.67s	744	139	462
Kimi K2.7 Code	10.0	10.0	100.0%	0		10.78s	477	1,024	1,071

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.2	5.8	66.7%	1		32.73s	781	121	466
Kimi K2.7 Code	9.9	10.0	100.0%	0		5.39s	669	725	1,232

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		3.27s	1,452	393	595
Kimi K2.7 Code	5.9	7.7	44.4%	1		41.00s	651	15,438	17,368

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		26.43s	0	0	0
Kimi K2.7 Code	3.0	10.0	0.0%	0		0ms	0	0	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		30.60s	477	200	3,466
Kimi K2.7 Code	3.0	10.0	0.0%	0		341.76s	210	2,153	40,930

Ganti Pasangan Perbandingan