Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

StepFun: Step 3.5 Flash vs StepFun: Step 3.7 Flash

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-05-29

Метрика Step 3.5 Flash Step 3.5 Flash medium Релиз: 2026-02-01 Step 3.7 Flash Step 3.7 Flash high Релиз: 2026-05-29
Оценка 7.4 7.1
Ранг #61 #74
Надежность 10.0 10.0
Стабильность 9.1 8.2
Тестов верно
Доля успешных попыток 62.3% 65.8%
Нестабильные тесты 2 4
Всего запусков 57 60
Стоимость за результат 0.133 8.723
Общая стоимость $0.015 $0.960
Цена входа $0.090 / 1M $0.200 / 1M
Цена выхода $0.300 / 1M $1.150 / 1M
Выходные токены 90,478 828,084
Токены рассуждений 173,544 0
Время ответа (среднее) 43.20s 49.43s
Время ответа (макс.) 170.45s 192.75s
Время ответа (суммарно) 561.54s 988.58s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Step 3.5 Flash 10.0 10.0 100.0% 0 40.57s 20,391 24,176
Step 3.7 Flash 10.0 10.0 100.0% 0 13.40s 42,656 0
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Step 3.5 Flash 3.5 6.0 50.0% 1 62.83s 12,098 0
Step 3.7 Flash 3.6 4.6 25.0% 1 126.82s 164,069 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 1,176 12,984
Step 3.7 Flash 10.0 10.0 100.0% 0 13.01s 8,802 0
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 600 13,886
Step 3.7 Flash 10.0 10.0 100.0% 0 14.72s 23,113 0
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Step 3.5 Flash 5.3 7.2 44.4% 1 170.45s 45,350 90,436
Step 3.7 Flash 4.1 4.4 44.5% 2 149.64s 410,502 0
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Step 3.5 Flash 5.5 10.0 0.0% 0 22.39s 240 3,506
Step 3.7 Flash 5.5 10.0 0.0% 0 4.17s 2,862 0
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Step 3.5 Flash 8.3 10.0 50.0% 0 4.78s 2,364 3,521
Step 3.7 Flash 9.8 10.0 100.0% 0 1.52s 2,010 0
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Step 3.5 Flash 5.3 10.0 33.3% 0 7.22s 5,630 10,861
Step 3.7 Flash 5.3 7.2 44.4% 1 10.22s 25,422 0
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 275 3,802
Step 3.7 Flash 10.0 10.0 100.0% 0 2.79s 1,172 0
Эрудиция Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Step 3.5 Flash 3.0 10.0 0.0% 0 108.45s 2,354 10,372
Step 3.7 Flash 3.0 10.0 0.0% 0 149.34s 147,476 0

Быстрое сравнение

Сменить пару сравнения