Mistral Small 4 (medium) vs MiMo-V2.5

Model yang Dibandingkan

Model yang direkomendasikan MiMo-V2.5

It has the best score here (5.1), while costing about 3.9x less than Mistral Small 4 (medium).

Metrik	Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16	MiMo-V2.5 MiMo-V2.5 none Rilis: 2026-04-22

Metrik	Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16	MiMo-V2.5 MiMo-V2.5 none Rilis: 2026-04-22
Skor	5.1	5.1
Peringkat	#262	#266
Keandalan	10.0	10.0
Konsistensi	7.0	9.2
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	43.9%	27.3%
Tes tidak stabil	8	2
Total Run	66	66
Biaya per hasil	1.923	0.769
Total Biaya	$0.097	$0.025
Harga input	$0.150 / 1M	$0.140 / 1M
Harga output	$0.600 / 1M	$0.280 / 1M
Total token input	140,559	141,052
Token output	40,268	16,464
Token penalaran	93,329	0
Waktu respons (rata-rata)	10.80s	4.68s
Waktu respons (maks)	59.15s	55.36s
Waktu respons (total)	237.60s	103.02s
Parameter	119B total (6B aktif)	310B total (15B aktif)
Ketersediaan	Sumber terbuka	Sumber terbuka

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

medium

none

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778
MiMo-V2.5	3.5	8.0	16.7%	1		2.19s	645	282	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715
MiMo-V2.5	5.5	10.0	33.3%	0		3.24s	7,440	696	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	3.0	10.0	0.0%	0		32.40s	116,624	17,890	18,384
MiMo-V2.5	3.0	10.0	0.0%	0		28.86s	114,133	14,527	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723
MiMo-V2.5	6.5	10.0	50.0%	0		1.01s	7,758	366	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	5.9	7.2	55.6%	1		6.33s	807	3,427	7,871
MiMo-V2.5	2.9	7.2	11.1%	1		1.24s	762	27	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828
MiMo-V2.5	4.4	9.9	0.0%	0		6.86s	498	81	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031
MiMo-V2.5	6.5	10.0	50.0%	0		751ms	684	72	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632
MiMo-V2.5	5.4	10.0	33.3%	0		2.13s	678	166	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810
MiMo-V2.5	10.0	10.0	100.0%	0		2.43s	8,238	231	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557
MiMo-V2.5	3.0	10.0	0.0%	0		3.89s	216	16	0

Ganti Pasangan Perbandingan