StepFun: Step 3.7 Flash vs Thinking Machines: Inkling

Skor rata-rata hampir imbang di 8.0 vs 8.0. Step 3.7 Flash (medium) memiliki biaya benchmark lebih rendah di $0.515 vs $1.006. Step 3.7 Flash (medium) lebih cepat di 26.37s vs 64.16s, dengan tingkat keberhasilan 72.7% vs 77.3%.

Model yang direkomendasikanStep 3.7 Flash (medium)It has the best score here (8.0), while costing about 2.0x less than Inkling (high).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-18

Metrik	Step 3.7 Flash Step 3.7 Flash medium Rilis: 2026-05-29	Inkling Inkling high Rilis: 2026-07-18

Metrik	Step 3.7 Flash Step 3.7 Flash medium Rilis: 2026-05-29	Inkling Inkling high Rilis: 2026-07-18
Skor	8.0	8.0
Peringkat	#29	#28
Keandalan	9.9	9.8
Konsistensi	8.9	8.9
Tes benar
Tingkat lulus per percobaan	72.7%	77.3%
Tes tidak stabil	3	3
Total Run	64	66
Biaya per hasil	3.676	6.704
Total Biaya	$0.515	$1.006
Harga input	$0.200 / 1M	$1.000 / 1M
Harga output	$1.150 / 1M	$4.050 / 1M
Total token input	114,062	86,746
Token output	427,572	6,055
Token penalaran	0	220,791
Waktu respons (rata-rata)	26.37s	64.16s
Waktu respons (maks)	152.83s	327.51s
Waktu respons (total)	580.25s	1411.59s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#29 Step 3.7 Flash

medium

Biaya: $0.006
Waktu: 46.2s
Token: 4,466 tok

#28 Thinking Machines: Inkling

high

Biaya: $0.005
Waktu: 32.2s
Token: 1,275 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Step 3.7 Flash	8.7	7.9	91.7%	1		9.65s	756	32,185	0
Inkling	10.0	10.0	100.0%	0		12.68s	702	455	7,204

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Step 3.7 Flash	8.8	7.8	88.9%	1		27.42s	7,437	44,797	0
Inkling	8.5	10.0	66.7%	0		148.36s	7,374	430	78,982

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Step 3.7 Flash	7.3	5.8	83.3%	1		80.94s	87,764	114,720	0
Inkling	7.3	5.8	83.3%	1		63.78s	61,296	3,854	19,895

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Step 3.7 Flash	10.0	10.0	100.0%	0		2.75s	7,398	3,020	0
Inkling	10.0	10.0	100.0%	0		8.19s	7,068	216	2,349

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Step 3.7 Flash	7.7	10.0	66.7%	0		48.27s	708	70,347	0
Inkling	7.7	10.0	66.7%	0		186.39s	683	59	76,777

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Step 3.7 Flash	4.0	10.0	0.0%	0		6.85s	525	3,987	0
Inkling	10.0	10.0	100.0%	0		6.53s	501	182	1,151

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Step 3.7 Flash	9.8	10.0	100.0%	0		1.83s	735	2,166	0
Inkling	9.8	10.0	100.0%	0		7.00s	708	93	2,098

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Step 3.7 Flash	5.7	9.9	33.3%	0		6.19s	756	15,071	0
Inkling	6.9	4.9	77.8%	2		10.69s	714	429	4,623

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Step 3.7 Flash	10.0	10.0	100.0%	0		4.16s	7,746	2,115	0
Inkling	3.0	10.0	0.0%	0		6.52s	7,481	307	601

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Step 3.7 Flash	3.0	10.0	0.0%	0		113.98s	237	139,164	0
Inkling	3.0	10.0	0.0%	0		153.57s	219	30	27,111

Perbandingan Cepat

Ganti Pasangan Perbandingan

GPT-5.2 ChatnonevsStep 3.7 Flashmedium GPT-5.2 ChatnonevsInklinghigh Step 3.7 FlashmediumvsGLM 5.2high Muse Spark 1.1highvsStep 3.7 Flashmedium GPT-5 MinimediumvsInklinghigh Kimi K3maxvsStep 3.7 Flashmedium GPT-5.6 TerrahighvsStep 3.7 Flashmedium Kimi K3maxvsInklinghigh Seed-2.0-LitemediumvsInklinghigh Qwen3.7 PlusmediumvsInklinghigh Gemini 2.5 FlashmediumvsInklinghigh Qwen3.6 PlusmediumvsInklinghigh