Qwen3.8 27B (low) vs Step 3.7 Flash (medium)

Model yang direkomendasikan Step 3.7 Flash (medium)

It has the best score here (7.9), while responding about 1.7x faster than Qwen3.8 27B (low).

Perbandingan terperinci

Metrik	Qwen3.8 27B Qwen3.8 27B low Rilis: 2026-08-14	Step 3.7 Flash Step 3.7 Flash medium Rilis: 2026-05-29

Metrik	Qwen3.8 27B Qwen3.8 27B low Rilis: 2026-08-14	Step 3.7 Flash Step 3.7 Flash medium Rilis: 2026-05-29
Skor	7.9	7.9
Peringkat	#61	#60
Keandalan	10.0	10.0
Konsistensi	10.0	8.9
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	68.2%	68.2%
Tes tidak stabil	0	3
Total Run	66	66
Biaya per hasil	T/A	3.801
Total Biaya	T/A	$0.495
Harga input	T/A	$0.200 / 1M
Harga output	T/A	$1.150 / 1M
Total token input	99,705	114,191
Token output	1,545	409,709
Token penalaran	167,784	0
Waktu respons (rata-rata)	39.11s	23.51s
Waktu respons (maks)	376.04s	152.83s
Waktu respons (total)	860.51s	517.21s
Parameter	27.3B	198B total (11B aktif)
Ketersediaan	Bobot tersedia	Sumber terbuka

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

low

medium

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Qwen3.8 27B	10.0	10.0	100.0%	0		3.02s	984	183	2,016
Step 3.7 Flash	8.7	7.9	91.7%	1		9.65s	756	32,185	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Qwen3.8 27B	7.7	10.0	66.7%	0		140.92s	8,127	585	86,694
Step 3.7 Flash	8.8	7.8	88.9%	1		27.42s	7,437	44,797	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Qwen3.8 27B	10.0	10.0	100.0%	0		90.63s	69,687	66	37,791
Step 3.7 Flash	7.3	5.8	83.3%	1		80.94s	87,764	114,720	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Qwen3.8 27B	10.0	10.0	100.0%	0		8.03s	9,087	150	1,962
Step 3.7 Flash	10.0	10.0	100.0%	0		2.75s	7,398	3,020	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Qwen3.8 27B	5.3	10.0	33.3%	0		60.78s	1,014	12	31,872
Step 3.7 Flash	5.3	10.0	33.3%	0		27.26s	837	52,484	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Qwen3.8 27B	5.0	10.0	0.0%	0		5.37s	594	132	729
Step 3.7 Flash	4.0	10.0	0.0%	0		6.85s	525	3,987	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Qwen3.8 27B	10.0	10.0	100.0%	0		2.43s	855	48	915
Step 3.7 Flash	9.8	10.0	100.0%	0		1.83s	735	2,166	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Qwen3.8 27B	7.7	10.0	66.7%	0		4.91s	930	240	2,382
Step 3.7 Flash	5.7	9.9	33.3%	0		6.19s	756	15,071	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Qwen3.8 27B	3.0	10.0	0.0%	0		8.42s	8,145	15	1,350
Step 3.7 Flash	10.0	10.0	100.0%	0		4.16s	7,746	2,115	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Qwen3.8 27B	3.0	10.0	0.0%	0		12.64s	282	114	2,073
Step 3.7 Flash	3.0	10.0	0.0%	0		113.98s	237	139,164	0

Ganti Pasangan Perbandingan