AI BENCHY Compare

Google: Gemini 3.5 Flash vs StepFun: Step 3.5 Flash

Сводка

Сравнение benchmark Gemini 3.5 Flash vs Step 3.5 Flash: Gemini 3.5 Flash лидирует по среднему баллу: 7.0 vs 6.9. Step 3.5 Flash имеет более низкую стоимость benchmark: $0.070 vs $1.079. Gemini 3.5 Flash быстрее: 9.93s vs 72.53s, с долей успешных попыток 77.8% vs 56.7%.

Рекомендуемая модель: Step 3.5 Flash - Его балл близок к лучшему здесь (6.9 против 7.0), при этом он примерно в 15.6 раза дешевле, чем Gemini 3.5 Flash.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-12

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash none Релиз: 2026-05-19	Step 3.5 Flash Step 3.5 Flash medium Релиз: 2026-02-01

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash none Релиз: 2026-05-19	Step 3.5 Flash Step 3.5 Flash medium Релиз: 2026-02-01
Оценка	7.0	6.9
Ранг	#66	#67
Надежность	10.0	10.0
Стабильность	8.9	9.4
Тестов верно
Доля успешных попыток	77.8%	56.7%
Нестабильные тесты	3	1
Всего запусков	63	60
Стоимость за результат	7.190	0.198
Общая стоимость	$1.079	$0.070
Цена входа	$1.500 / 1M	$0.090 / 1M
Цена выхода	$9.000 / 1M	$0.300 / 1M
Общее число входных токенов	13,843	34,431
Выходные токены	117,518	91,587
Токены рассуждений	0	195,973
Время ответа (среднее)	9.93s	72.53s
Время ответа (макс.)	64.36s	453.94s
Время ответа (суммарно)	178.68s	1015.47s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#66 Gemini 3.5 Flash

none

Cost: $0.225
Time: 125.5s
Tokens: 25,004 tok

#67 Step 3.5 Flash

medium

Cost: $0.008
Time: 277.1s
Tokens: 23,695 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.53s	492	5,101	0
Step 3.5 Flash	10.0	10.0	100.0%	0		40.57s	694	20,391	24,176

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	8.8	7.8	88.9%	1		34.69s	8,122	75,927	0
Step 3.5 Flash	3.5	7.8	0.0%	0		258.38s	2,211	13,207	22,429

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		0ms	0	0	0
Step 3.5 Flash	10.0	10.0	100.0%	0		29.57s	13,638	1,176	12,984

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	6.5	10.0	50.0%	0		8.10s	2,781	5,895	0
Step 3.5 Flash	10.0	10.0	100.0%	0		15.01s	7,368	600	13,886

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	7.6	7.2	77.8%	1		10.64s	633	17,910	0
Step 3.5 Flash	5.3	7.2	44.4%	1		170.45s	673	45,350	90,436

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		3.46s	486	1,620	0
Step 3.5 Flash	5.5	10.0	0.0%	0		22.39s	509	240	3,506

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	9.8	10.0	100.0%	0		3.38s	615	3,928	0
Step 3.5 Flash	8.3	10.0	50.0%	0		4.78s	705	2,364	3,521

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		3.13s	558	4,640	0
Step 3.5 Flash	5.3	10.0	33.3%	0		7.22s	711	5,630	10,861

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		0ms	0	0	0
Step 3.5 Flash	10.0	10.0	100.0%	0		11.91s	7,701	275	3,802

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	2.8	1.6	33.3%	1		4.87s	156	2,497	0
Step 3.5 Flash	3.0	10.0	0.0%	0		108.45s	221	2,354	10,372

Быстрое сравнение

Сменить пару сравнения

Gemini 3.5 FlashnonevsKimi K2.7 Codemedium Gemini 3 Flash PreviewnonevsStep 3.5 Flashmedium Qwen3.7 MaxnonevsStep 3.5 Flashmedium Gemini 3.5 FlashnonevsGLM 5.1medium Gemini 3.5 FlashnonevsStep 3.7 Flashhigh Gemini 3.5 FlashnonevsMiMo-V2-Flashmedium Gemini 3.5 FlashminimalvsStep 3.5 Flashmedium Gemini 3.5 FlashnonevsQwen3.5-Flashmedium Gemini 3.5 FlashnonevsRing-2.6-1Tmedium Qwen3.7 PlusnonevsStep 3.5 Flashmedium Gemini 3.5 FlashnonevsQwen3.6 35B A3Bmedium Gemini 3.5 FlashnonevsMiMo-V2.5medium