OpenAI: GPT-5 Mini vs StepFun: Step 3.7 Flash

Skor rata-rata hampir imbang di 8.1 vs 8.0. GPT-5 Mini (medium) memiliki biaya benchmark lebih rendah di $0.237 vs $0.515. Step 3.7 Flash (medium) lebih cepat di 26.37s vs 27.63s, dengan tingkat keberhasilan 63.6% vs 72.7%.

Model yang direkomendasikanGPT-5 Mini (medium)It has the best score here (8.1), while costing about 2.2x less than Step 3.7 Flash (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-17

Metrik	GPT-5 Mini GPT-5 Mini medium Rilis: 2025-08-07	Step 3.7 Flash Step 3.7 Flash medium Rilis: 2026-05-29

Metrik	GPT-5 Mini GPT-5 Mini medium Rilis: 2025-08-07	Step 3.7 Flash Step 3.7 Flash medium Rilis: 2026-05-29
Skor	8.1	8.0
Peringkat	#26	#28
Keandalan	10.0	9.9
Konsistensi	8.8	8.9
Tes benar
Tingkat lulus per percobaan	63.6%	72.7%
Tes tidak stabil	3	3
Total Run	66	64
Biaya per hasil	1.971	3.676
Total Biaya	$0.237	$0.515
Harga input	$0.250 / 1M	$0.200 / 1M
Harga output	$2.000 / 1M	$1.150 / 1M
Total token input	98,374	114,062
Token output	14,434	427,572
Token penalaran	91,498	0
Waktu respons (rata-rata)	27.63s	26.37s
Waktu respons (maks)	111.48s	152.83s
Waktu respons (total)	607.92s	580.25s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#26 GPT-5 Mini

medium

Biaya: $0.007
Waktu: 42.9s
Token: 3,432 tok

#28 Step 3.7 Flash

medium

Biaya: $0.006
Waktu: 46.2s
Token: 4,466 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5 Mini	7.1	7.6	66.7%	1		13.86s	606	1,715	6,378
Step 3.7 Flash	8.7	7.9	91.7%	1		9.65s	756	32,185	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5 Mini	10.0	10.0	100.0%	0		27.63s	7,302	658	17,152
Step 3.7 Flash	8.8	7.8	88.9%	1		27.42s	7,437	44,797	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5 Mini	7.3	5.8	83.3%	1		99.82s	75,392	8,387	35,328
Step 3.7 Flash	7.3	5.8	83.3%	1		80.94s	87,764	114,720	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5 Mini	10.0	10.0	100.0%	0		12.58s	7,140	453	3,200
Step 3.7 Flash	10.0	10.0	100.0%	0		2.75s	7,398	3,020	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5 Mini	3.6	7.2	22.2%	1		44.63s	515	293	14,016
Step 3.7 Flash	7.7	10.0	66.7%	0		48.27s	708	70,347	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5 Mini	4.5	10.0	0.0%	0		13.50s	477	349	1,856
Step 3.7 Flash	4.0	10.0	0.0%	0		6.85s	525	3,987	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5 Mini	10.0	10.0	100.0%	0		11.59s	660	310	3,968
Step 3.7 Flash	9.8	10.0	100.0%	0		1.83s	735	2,166	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5 Mini	5.6	9.8	33.3%	0		15.20s	642	1,622	6,144
Step 3.7 Flash	5.7	9.9	33.3%	0		6.19s	756	15,071	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5 Mini	10.0	10.0	100.0%	0		18.64s	5,445	487	1,600
Step 3.7 Flash	10.0	10.0	100.0%	0		4.16s	7,746	2,115	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5 Mini	3.0	10.0	0.0%	0		9.99s	195	160	1,856
Step 3.7 Flash	3.0	10.0	0.0%	0		113.98s	237	139,164	0

Perbandingan Cepat

Ganti Pasangan Perbandingan

GPT-5.2 ChatnonevsStep 3.7 Flashmedium Muse Spark 1.1highvsGPT-5 Minimedium Step 3.7 FlashmediumvsGLM 5.2high Muse Spark 1.1highvsStep 3.7 Flashmedium GPT-5 MinimediumvsGLM 5.2high Kimi K3maxvsStep 3.7 Flashmedium GPT-5.6 TerrahighvsStep 3.7 Flashmedium Kimi K3maxvsGPT-5 Minimedium Muse Spark 1.1lowvsGPT-5 Minimedium Muse Spark 1.1lowvsStep 3.7 Flashmedium Claude Opus 4.8lowvsStep 3.7 Flashmedium GPT-5 MinimediumvsGrok 4.5low