Mistral Small 4 (medium) vs GPT-5.4 Nano

Model yang direkomendasikan GPT-5.4 Nano

Its score stays close to the best score here (4.8 vs 5.1), while costing about 2.4x less than Mistral Small 4 (medium).

Perbandingan terperinci

Metrik	Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16	GPT-5.4 Nano GPT-5.4 Nano none Rilis: 2026-03-17

Metrik	Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16	GPT-5.4 Nano GPT-5.4 Nano none Rilis: 2026-03-17
Skor	5.1	4.8
Peringkat	#200	#214
Keandalan	10.0	10.0
Konsistensi	7.0	8.2
Cakupan benchmark	22/22 tes · 66/66 percobaan	22/22 tes · 66/66 percobaan
Tes benar
Tingkat lulus per percobaan	42.4%	28.8%
Tes tidak stabil	8	5
Total Run	66	66
Biaya per hasil	1.913	1.011
Total Biaya	$0.096	$0.041
Harga input	$0.150 / 1M	$0.200 / 1M
Harga output	$0.600 / 1M	$1.250 / 1M
Total token input	140,494	115,924
Token output	39,462	13,794
Token penalaran	92,362	0
Waktu respons (rata-rata)	10.77s	2.57s
Waktu respons (maks)	59.15s	25.50s
Waktu respons (total)	236.94s	56.51s

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

medium

none

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778
GPT-5.4 Nano	3.5	8.0	16.7%	1		1.18s	606	800	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715
GPT-5.4 Nano	4.6	7.9	22.2%	1		2.22s	7,305	613	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	3.0	10.0	0.0%	0		32.40s	116,624	17,890	18,384
GPT-5.4 Nano	3.0	10.0	0.0%	0		14.67s	92,731	11,290	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723
GPT-5.4 Nano	6.5	10.0	50.0%	0		1.11s	7,140	219	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	742	2,621	6,904
GPT-5.4 Nano	2.9	4.4	22.2%	2		926ms	723	52	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828
GPT-5.4 Nano	3.8	2.5	33.3%	1		1.31s	477	180	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031
GPT-5.4 Nano	6.3	10.0	50.0%	0		784ms	660	89	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632
GPT-5.4 Nano	5.4	10.0	33.3%	0		1.25s	642	308	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810
GPT-5.4 Nano	10.0	10.0	100.0%	0		3.40s	5,445	222	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557
GPT-5.4 Nano	3.0	10.0	0.0%	0		773ms	195	21	0

Ganti Pasangan Perbandingan