Ember-1 (max) vs MiniMax M3 (medium)

Model yang Dibandingkan

Model yang direkomendasikan MiniMax M3 (medium)

It has the best score here (6.7), while costing about 8.8x less than Ember-1 (max).

Metrik	Ember-1 Ember-1 max Rilis: 2026-09-28	MiniMax M3 MiniMax M3 medium Rilis: 2026-06-01

Metrik	Ember-1 Ember-1 max Rilis: 2026-09-28	MiniMax M3 MiniMax M3 medium Rilis: 2026-06-01
Skor	6.7	6.7
Peringkat	#181	#180
Keandalan	8.3	9.7
Konsistensi	7.8	8.1
Percobaan	69/69	69/69
Tes benar
Tingkat lulus per percobaan	59.4%	59.4%
Tes tidak stabil	6	5
Total Run	69	69
Biaya per hasil	29.671	3.381
Total Biaya	$3.264	$0.372
Harga input	$3.000 / 1M	$0.300 / 1M
Harga output	$15.000 / 1M	$1.200 / 1M
Total token input	153,399	166,517
Token output	7,803	107,386
Token penalaran	179,098	217,548
Waktu respons (rata-rata)	97.34s	77.03s
Waktu respons (maks)	587.08s	431.03s
Waktu respons (total)	2238.73s	1694.74s
Parameter	~2.8T total (~104B aktif)	428B total (23B aktif)
Ketersediaan	Tertutup	Bobot tersedia

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

max

medium

Kategori:

Tugas agen	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		62.53s	126,950	3,620	2,475
MiniMax M3	3.0	10.0	0.0%	0		116.50s	44,521	17,335	31,817

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	8.7	7.9	91.7%	1		23.74s	1,533	613	1,394
MiniMax M3	5.5	3.7	66.7%	3		14.95s	2,526	874	3,414

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	5.2	4.4	55.6%	2		105.09s	3,362	1,149	27,957
MiniMax M3	6.1	6.5	55.6%	1		144.74s	5,804	6,223	32,667

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.5	10.0	50.0%	0		64.37s	12,819	775	4,538
MiniMax M3	10.0	10.0	100.0%	0		138.24s	90,204	30,186	87,263

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.4	5.9	66.7%	1		39.79s	4,285	185	1,182
MiniMax M3	10.0	10.0	100.0%	0		14.92s	8,088	514	3,164

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.6	7.2	22.2%	1		471.21s	1,015	84	136,143
MiniMax M3	3.2	9.3	0.0%	0		234.97s	875	28,389	31,248

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	10.0	10.0	100.0%	0		7.04s	741	193	716
MiniMax M3	5.1	3.4	33.3%	1		33.25s	954	2,487	2,523

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	6.2	5.8	66.7%	1		32.97s	777	132	574
MiniMax M3	9.8	10.0	100.0%	0		6.14s	1,623	103	920

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	7.7	10.0	66.7%	0		6.57s	1,443	681	1,368
MiniMax M3	7.9	9.9	66.7%	0		49.91s	2,079	11,946	13,761

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		26.36s	0	0	0
MiniMax M3	10.0	10.0	100.0%	0		11.91s	9,168	281	555

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Ember-1	3.0	10.0	0.0%	0		24.95s	474	371	2,751
MiniMax M3	3.0	10.0	0.0%	0		100.80s	675	9,048	10,216

Ganti Pasangan Perbandingan