Ember-1 (max) vs Grok 4.7 (xhigh)

Model yang Dibandingkan

Model yang direkomendasikan Ember-1 (max)

It has the strongest score in this comparison (6.7) and the best overall balance of cost and response time across all 2 models.

Metrik	Ember-1 Ember-1 max Rilis: 2026-09-28	Grok 4.7 Grok 4.7 xhigh Rilis: 2026-09-21

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

max

xhigh

Kategori:

Tugas agen	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		62.53s	126,950	3,620	2,475
Grok 4.7	3.0	10.0	0.0%	0		304.76s	185,153	1,204	66,042

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	8.7	7.9	91.7%	1		23.74s	1,533	613	1,394
Grok 4.7	8.7	7.9	91.7%	1		35.37s	2,754	108	21,953

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	5.2	4.4	55.6%	2		105.09s	3,362	1,149	27,957
Grok 4.7	5.3	4.5	55.6%	2		414.53s	10,168	327	256,935

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.5	10.0	50.0%	0		64.37s	12,819	775	4,538
Grok 4.7	10.0	10.0	100.0%	0		170.10s	85,391	3,689	90,375

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.4	5.9	66.7%	1		39.79s	4,285	185	1,182
Grok 4.7	10.0	10.0	100.0%	0		7.50s	8,943	225	3,639

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.6	7.2	22.2%	1		471.21s	1,015	84	136,143
Grok 4.7	3.5	4.4	33.3%	2		190.55s	2,922	11	85,304

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		7.04s	741	193	716
Grok 4.7	4.7	1.6	66.7%	1		26.32s	1,080	86	4,949

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.2	5.8	66.7%	1		32.97s	777	132	574
Grok 4.7	9.8	10.0	100.0%	0		17.31s	1,863	57	7,728

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	7.7	10.0	66.7%	0		6.57s	1,443	681	1,368
Grok 4.7	10.0	10.0	100.0%	0		20.50s	2,439	169	10,900

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		26.36s	0	0	0
Grok 4.7	10.0	10.0	100.0%	0		5.36s	8,544	206	568

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		24.95s	474	371	2,751
Grok 4.7	3.0	10.0	0.0%	0		106.61s	792	12	17,828

Ganti Pasangan Perbandingan