OpenAI: GPT-5.4 vs Xiaomi: MiMo-V2.5-Pro

GPT-5.4 unggul dalam skor rata-rata dengan 5.8 vs 5.5. MiMo-V2.5-Pro memiliki biaya benchmark lebih rendah di $0.068 vs $0.397. GPT-5.4 lebih cepat di 2.07s vs 4.12s, dengan tingkat keberhasilan 34.9% vs 37.9%.

Model yang direkomendasikanMiMo-V2.5-ProIts score stays close to the best score here (5.5 vs 5.8), while costing about 5.9x less than GPT-5.4.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-21

Metrik	GPT-5.4 GPT-5.4 none Rilis: 2026-03-05	MiMo-V2.5-Pro MiMo-V2.5-Pro none Rilis: 2026-04-22

Metrik	GPT-5.4 GPT-5.4 none Rilis: 2026-03-05	MiMo-V2.5-Pro MiMo-V2.5-Pro none Rilis: 2026-04-22
Skor	5.8	5.5
Peringkat	#145	#160
Keandalan	10.0	10.0
Konsistensi	9.2	8.6
Tes benar
Tingkat lulus per percobaan	34.9%	37.9%
Tes tidak stabil	2	4
Total Run	66	66
Biaya per hasil	5.663	1.509
Total Biaya	$0.397	$0.068
Harga input	$2.500 / 1M	$0.435 / 1M
Harga output	$15.000 / 1M	$0.870 / 1M
Total token input	108,632	124,799
Token output	8,321	15,362
Token penalaran	0	0
Waktu respons (rata-rata)	2.07s	4.12s
Waktu respons (maks)	15.63s	53.13s
Waktu respons (total)	45.51s	90.55s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#145 GPT-5.4

none

Biaya: $0.026
Waktu: 18.1s
Token: 1,792 tok

#160 MiMo-V2.5-Pro

none

Biaya: $0.004
Waktu: 46.4s
Token: 4,025 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	3.2	8.0	8.3%	1		1.21s	606	406	0
MiMo-V2.5-Pro	3.3	8.1	8.3%	1		2.67s	645	994	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	5.5	10.0	33.3%	0		1.62s	7,305	516	0
MiMo-V2.5-Pro	4.3	7.8	22.2%	1		1.41s	6,559	485	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	3.0	10.0	0.0%	0		9.26s	85,439	6,195	0
MiMo-V2.5-Pro	3.0	10.0	0.0%	0		28.33s	98,770	12,915	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	10.0	10.0	100.0%	0		1.04s	7,140	222	0
MiMo-V2.5-Pro	10.0	10.0	100.0%	0		1.32s	7,758	249	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	5.3	7.2	44.4%	1		1.07s	723	50	0
MiMo-V2.5-Pro	5.3	10.0	33.3%	0		877ms	753	27	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	4.4	9.9	0.0%	0		1.78s	477	184	0
MiMo-V2.5-Pro	4.0	10.0	0.0%	0		2.58s	498	87	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	6.5	10.0	50.0%	0		1.07s	660	81	0
MiMo-V2.5-Pro	6.4	10.0	50.0%	0		1.03s	684	66	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	5.6	9.8	33.3%	0		1.44s	642	381	0
MiMo-V2.5-Pro	6.7	4.7	77.8%	2		1.30s	678	267	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	10.0	10.0	100.0%	0		2.75s	5,445	246	0
MiMo-V2.5-Pro	10.0	10.0	100.0%	0		3.30s	8,238	258	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	3.0	10.0	0.0%	0		990ms	195	40	0
MiMo-V2.5-Pro	3.0	10.0	0.0%	0		1.89s	216	14	0

Perbandingan Cepat

Ganti Pasangan Perbandingan

Nemotron 3 SupermediumTersedia gratisvsGPT-5.4none KAT-Coder-Air V2.5mediumvsMiMo-V2.5-Pronone North Mini CodemediumTersedia gratisvsGPT-5.4none KAT-Coder-Air V2.5lowvsMiMo-V2.5-Pronone KAT-Coder-Air V2.5highvsMiMo-V2.5-Pronone KAT-Coder-Air V2.5highvsGPT-5.4none KAT-Coder-Air V2.5mediumvsGPT-5.4none Nemotron 3 SupermediumTersedia gratisvsMiMo-V2.5-Pronone GPT-5.4nonevsStep 3.5 Flashmedium GPT-5.4nonevsInklinglow Gemini 3.1 Flash LiteminimalvsGPT-5.4none North Mini CodemediumTersedia gratisvsMiMo-V2.5-Pronone