Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.5 Flash vs StepFun: Step 3.7 Flash

Сводка

Сравнение benchmark Gemini 3.5 Flash vs Step 3.7 Flash: Step 3.7 Flash лидирует по среднему баллу: 7.1 vs 6.8. Gemini 3.5 Flash имеет более низкую стоимость benchmark: $0.108 vs $1.148. Gemini 3.5 Flash быстрее: 1.57s vs 64.46s, с долей успешных попыток 68.3% vs 63.5%.

Рекомендуемая модель: Gemini 3.5 Flash - Его балл близок к лучшему здесь (6.8 против 7.1), при этом он примерно в 10.7 раза дешевле, чем Step 3.7 Flash.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-18

Метрика Gemini 3.5 Flash Gemini 3.5 Flash minimal Релиз: 2026-05-19 Step 3.7 Flash Step 3.7 Flash high Релиз: 2026-05-29
Оценка 6.8 7.1
Ранг #71 #63
Надежность 10.0 10.0
Стабильность 9.6 8.2
Тестов верно
Доля успешных попыток 68.3% 63.5%
Нестабильные тесты 1 4
Всего запусков 63 63
Стоимость за результат 0.767 10.434
Общая стоимость $0.108 $1.148
Цена входа $1.500 / 1M $0.200 / 1M
Цена выхода $9.000 / 1M $1.150 / 1M
Общее число входных токенов 39,847 38,391
Выходные токены 5,277 991,355
Токены рассуждений 0 0
Время ответа (среднее) 1.57s 64.46s
Время ответа (макс.) 5.51s 364.99s
Время ответа (суммарно) 33.02s 1353.57s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#71 Gemini 3.5 Flash

minimal
Стоимость
$0.041
Время
20.4s
Токены
4,608 tok

#63 Step 3.7 Flash

high
Стоимость
$0.007
Время
63.6s
Токены
6,030 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 3.5 Flash 6.5 10.0 50.0% 0 892ms 492 405 0
Step 3.7 Flash 10.0 10.0 100.0% 0 13.40s 696 42,656 0
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 3.5 Flash 5.6 9.9 33.3% 0 2.75s 8,122 3,456 0
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 3.5 Flash 3.0 10.0 0.0% 0 3.56s 15,780 404 0
Step 3.7 Flash 10.0 10.0 100.0% 0 13.01s 13,638 8,802 0
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 3.5 Flash 10.0 10.0 100.0% 0 1.66s 7,548 279 0
Step 3.7 Flash 10.0 10.0 100.0% 0 14.72s 7,368 23,113 0
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 3.5 Flash 10.0 10.0 100.0% 0 899ms 633 12 0
Step 3.7 Flash 4.1 4.4 44.5% 2 149.64s 783 410,502 0
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 3.5 Flash 10.0 10.0 100.0% 0 922ms 486 117 0
Step 3.7 Flash 5.5 10.0 0.0% 0 4.17s 510 2,862 0
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 3.5 Flash 6.4 5.8 66.7% 1 893ms 615 76 0
Step 3.7 Flash 9.8 10.0 100.0% 0 1.52s 705 2,010 0
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 3.5 Flash 10.0 10.0 100.0% 0 1.45s 558 282 0
Step 3.7 Flash 5.3 7.2 44.4% 1 10.22s 711 25,422 0
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.79s 5,457 234 0
Step 3.7 Flash 10.0 10.0 100.0% 0 2.79s 7,701 1,172 0
Эрудиция Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 3.5 Flash 3.0 10.0 0.0% 0 1.76s 156 12 0
Step 3.7 Flash 3.0 10.0 0.0% 0 149.34s 222 147,476 0

Быстрое сравнение

Сменить пару сравнения