Google: Gemini 3.5 Flash vs StepFun: Step 3.5 Flash

Gemini 3.5 Flash (minimal) unggul dalam skor rata-rata dengan 6.8 vs 6.0. Step 3.5 Flash (medium) memiliki biaya benchmark lebih rendah di $0.108 vs $0.300. Gemini 3.5 Flash (minimal) lebih cepat di 2.65s vs 174.22s, dengan tingkat keberhasilan 65.2% vs 51.5%.

Model yang direkomendasikanGemini 3.5 Flash (minimal)It has the best score here (6.8), while responding about 65.8x faster than Step 3.5 Flash (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-25

Metrik	Gemini 3.5 Flash Gemini 3.5 Flash minimal Rilis: 2026-05-19	Step 3.5 Flash Step 3.5 Flash medium Rilis: 2026-02-01

Metrik	Gemini 3.5 Flash Gemini 3.5 Flash minimal Rilis: 2026-05-19	Step 3.5 Flash Step 3.5 Flash medium Rilis: 2026-02-01
Skor	6.8	6.0
Peringkat	#96	#141
Keandalan	10.0	9.2
Konsistensi	9.6	9.0
Tes benar
Tingkat lulus per percobaan	65.2%	51.5%
Tes tidak stabil	1	1
Total Run	66	63
Biaya per hasil	2.138	0.540
Total Biaya	$0.300	$0.108
Harga input	$1.500 / 1M	$0.100 / 1M
Harga output	$9.000 / 1M	$0.300 / 1M
Total token input	100,753	65,707
Token output	16,454	108,561
Token penalaran	0	293,993
Waktu respons (rata-rata)	2.65s	174.22s
Waktu respons (maks)	25.26s	1597.85s
Waktu respons (total)	58.27s	2613.32s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#96 Gemini 3.5 Flash

minimal

Biaya: $0.041
Waktu: 20.4s
Token: 4,608 tok

#141 Step 3.5 Flash

medium

Biaya: $0.008
Waktu: 277.1s
Token: 23,695 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash	6.5	10.0	50.0%	0		892ms	492	405	0
Step 3.5 Flash	10.0	10.0	100.0%	0		40.57s	694	20,391	24,176

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash	5.6	9.9	33.3%	0		2.75s	8,122	3,456	0
Step 3.5 Flash	2.4	5.2	0.0%	0		258.38s	2,211	13,207	22,429

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash	3.0	10.0	0.0%	0		14.41s	76,686	11,581	0
Step 3.5 Flash	6.5	10.0	50.0%	0		813.71s	44,914	18,150	111,004

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.66s	7,548	279	0
Step 3.5 Flash	10.0	10.0	100.0%	0		15.01s	7,368	600	13,886

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash	10.0	10.0	100.0%	0		899ms	633	12	0
Step 3.5 Flash	5.3	7.2	44.4%	1		170.45s	673	45,350	90,436

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash	10.0	10.0	100.0%	0		922ms	486	117	0
Step 3.5 Flash	5.5	10.0	0.0%	0		22.39s	509	240	3,506

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash	6.4	5.8	66.7%	1		893ms	615	76	0
Step 3.5 Flash	8.3	10.0	50.0%	0		4.78s	705	2,364	3,521

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.45s	558	282	0
Step 3.5 Flash	5.3	10.0	33.3%	0		7.22s	711	5,630	10,861

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.79s	5,457	234	0
Step 3.5 Flash	10.0	10.0	100.0%	0		11.91s	7,701	275	3,802

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash	3.0	10.0	0.0%	0		1.76s	156	12	0
Step 3.5 Flash	3.0	10.0	0.0%	0		108.45s	221	2,354	10,372

Perbandingan Cepat

Ganti Pasangan Perbandingan