AI BENCHY Compare

Google: Gemini 3.5 Flash vs StepFun: Step 3.7 Flash

Сводка

Сравнение benchmark Gemini 3.5 Flash vs Step 3.7 Flash: Step 3.7 Flash лидирует по среднему баллу: 8.5 vs 7.0. Step 3.7 Flash имеет более низкую стоимость benchmark: $0.376 vs $1.079. Gemini 3.5 Flash быстрее: 9.93s vs 20.35s, с долей успешных попыток 77.8% vs 73.0%.

Рекомендуемая модель: Step 3.7 Flash - Здесь у него лучший балл (8.5), при этом он примерно в 2.9 раза дешевле, чем Gemini 3.5 Flash.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-12

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash none Релиз: 2026-05-19	Step 3.7 Flash Step 3.7 Flash medium Релиз: 2026-05-29

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash none Релиз: 2026-05-19	Step 3.7 Flash Step 3.7 Flash medium Релиз: 2026-05-29
Оценка	7.0	8.5
Ранг	#66	#23
Надежность	10.0	9.9
Стабильность	8.9	9.3
Тестов верно
Доля успешных попыток	77.8%	73.0%
Нестабильные тесты	3	2
Всего запусков	63	61
Стоимость за результат	7.190	2.686
Общая стоимость	$1.079	$0.376
Цена входа	$1.500 / 1M	$0.200 / 1M
Цена выхода	$9.000 / 1M	$1.150 / 1M
Общее число входных токенов	13,843	39,981
Выходные токены	117,518	319,958
Токены рассуждений	0	0
Время ответа (среднее)	9.93s	20.35s
Время ответа (макс.)	64.36s	113.98s
Время ответа (суммарно)	178.68s	427.42s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#66 Gemini 3.5 Flash

none

Cost: $0.225
Time: 125.5s
Tokens: 25,004 tok

#23 Step 3.7 Flash

medium

Cost: $0.006
Time: 46.2s
Tokens: 4,466 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.53s	492	5,101	0
Step 3.7 Flash	8.7	7.9	91.7%	1		9.65s	756	32,185	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	8.8	7.8	88.9%	1		34.69s	8,122	75,927	0
Step 3.7 Flash	8.8	7.8	88.9%	1		27.42s	7,437	44,797	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		0ms	0	0	0
Step 3.7 Flash	10.0	10.0	100.0%	0		9.06s	13,683	7,106	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	6.5	10.0	50.0%	0		8.10s	2,781	5,895	0
Step 3.7 Flash	10.0	10.0	100.0%	0		2.75s	7,398	3,020	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	7.6	7.2	77.8%	1		10.64s	633	17,910	0
Step 3.7 Flash	7.7	10.0	66.7%	0		48.27s	708	70,347	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		3.46s	486	1,620	0
Step 3.7 Flash	4.0	10.0	0.0%	0		6.85s	525	3,987	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	9.8	10.0	100.0%	0		3.38s	615	3,928	0
Step 3.7 Flash	9.8	10.0	100.0%	0		1.83s	735	2,166	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		3.13s	558	4,640	0
Step 3.7 Flash	5.7	9.9	33.3%	0		6.19s	756	15,071	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		0ms	0	0	0
Step 3.7 Flash	10.0	10.0	100.0%	0		4.16s	7,746	2,115	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	2.8	1.6	33.3%	1		4.87s	156	2,497	0
Step 3.7 Flash	3.0	10.0	0.0%	0		113.98s	237	139,164	0

Быстрое сравнение

Сменить пару сравнения

GPT-5.2 ChatnonevsStep 3.7 Flashmedium Gemini 3.5 FlashnonevsKimi K2.7 Codemedium Gemini 3.5 FlashnonevsStep 3.5 Flashmedium Gemini 3.5 FlashnonevsGLM 5.1medium Gemini 3.5 FlashnonevsStep 3.7 Flashhigh Gemini 3.5 FlashnonevsMiMo-V2-Flashmedium Gemini 3.5 FlashnonevsQwen3.5-Flashmedium Gemini 3.5 FlashnonevsRing-2.6-1Tmedium DeepSeek V4 FlashhighvsStep 3.7 Flashmedium Gemini 3.5 FlashnonevsQwen3.6 35B A3Bmedium Gemini 3.5 FlashnonevsMiMo-V2.5medium Gemini 3.5 FlashnonevsGLM 5V Turbomedium