AI BENCHY
Advertise here
#32

Step 3.7 Flash

Stepfun Релиз: 2026-05-29 Проверено: 2026-05-29 11:49 stepfun/step-3.7-flash::medium
198B всего (11B активных)MoEОткрытый исходный код
(high) (medium) (low)

Сводка

Step 3.7 Flash набирает 7.9 в AI BENCHY и занимает #32. У модели надежность 9.9, доля успешных попыток 71.7%, общая стоимость $0.404 и среднее время ответа 20.29s.

Что делает Step 3.7 Flash особенной: Сильнее всего модель выделяется в Предметно-ориентированное, где занимает #1; самая слабая область — Общий интеллект с #18. Общая стоимость benchmark необычно низкая для такого уровня результата.

Сведения о модели

Дата исследования: 2026-08-12

Заявлено
Параметры
198B всего (11B активных)
Архитектура
MoE
Доступность
Открытый исходный код
Лицензия
Apache-2.0

Стабильность

9.2

Общее число выходных токенов

344,492

Общее число входных токенов

0

Цена входа

$0.200 / 1M

Цена выхода

$1.150 / 1M

Тестов верно

Ошибочных тестов: 7

Доля успешных попыток: 71.7%

Нестабильные тесты

2

Нестабильные тесты имели смешанные результаты между прогонами (как минимум один успех и один провал).

Время ответа (среднее)

20.29s

Время ответа (макс.): 136.44s

Время ответа (суммарно): 405.79s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#32 Step 3.7 Flash

medium
Стоимость
$0.006
Время
46.2s
Токены
4,466 tok

История запусков

Проверено Оценка Надежность Тестов верно Общая стоимость Сравнить
2026-08-14 02:31 Повторный тест 7.9 10.0 $0.495 Сравнить
2026-07-16 22:50 Добавлен новый тест 8.0 9.9 $0.515 Сравнить
2026-06-04 13:52 Добавлен новый тест 8.0 9.9 $0.376 Сравнить
2026-05-29 11:49 Первый запуск 7.9 9.9 $0.404 Текущий запуск

Сравнение запусков

ЗапускПокрытие бенчмаркаОценкаСтабильностьНадежностьТестов верноНестабильные тестыОбщее число выходных токеновОбщее число входных токеновОбщая стоимостьВремя ответа (среднее)
2026-05-29 11:49 · Первый запуск60/60 попыток7.99.29.913/202344,4920$0.40420.29s
2026-08-14 02:31 · Повторный тест66/66 попыток7.98.910.013/223409,709114,191$0.49523.51s
Разница0.0+0.3-0.10-1-65217-114191-$0.091-3220ms

Покрытие бенчмарка различается: 60/60 попыток (Цель: 3 повторов на тест) против 66/66 попыток (Цель: 3 повторов на тест). Итоги и метрики, зависящие от числа повторов, нельзя сравнивать напрямую.

Эти два запуска использовали разные наборы бенчмарков, поэтому различия отражают и изменения модели, и изменения набора.

Графики

Выберите первую модель, затем нажмите вторую, чтобы открыть страницу сравнения бок о бок.

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Быстрое сравнение

Разбивка по категориям

Категория Оценка Стабильность Тестов верно
Анти-ИИ уловки 8.7 7.9
Программирование 8.2 6.7
Комбинированный 10.0 10.0
Парсинг и извлечение данных 10.0 10.0
Предметно-ориентированное 7.7 10.0
Общий интеллект 4.0 10.0
Следование инструкциям 9.8 10.0
Решение головоломок 5.7 9.9
Вызов инструментов 10.0 10.0
Эрудиция 3.0 10.0

Сравниваемые модели