Навигация
AI BENCHY
Your ad here

AI BENCHY Compare

Mistral: Mistral Small 4 vs StepFun: Step 3.5 Flash

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-04-11

Метрика Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16 Step 3.5 Flash Step 3.5 Flash none Релиз: 2026-02-01
Оценка 5.7 3.0
Ранг #69 #93
Стабильность 6.8 10.0
Тестов верно
Доля успешных попыток 50.0% 0.0%
Нестабильные тесты 7 0
Всего запусков 54 3
Стоимость за результат 0.674 0.000
Общая стоимость $0.034 $0.000
???? ????? $0.150 / 1M $0.100 / 1M
???? ?????? $0.600 / 1M $0.300 / 1M
Выходные токены 15,084 0
Токены рассуждений 39,408 0
Время ответа (среднее) 5.64s 0ms
Время ответа (макс.) 30.49s 0ms
Время ответа (суммарно) 101.52s 0ms

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Step 3.5 Flash - - - - - - - -
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 6.7 3.5 66.7% 1 30.49s 2,796 11,296
Step 3.5 Flash 3.0 10.0 0.0% 0 0ms 0 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Step 3.5 Flash - - - - - - - -
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Step 3.5 Flash - - - - - - - -
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Step 3.5 Flash - - - - - - - -
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Step 3.5 Flash - - - - - - - -
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Step 3.5 Flash - - - - - - - -
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Step 3.5 Flash - - - - - - - -
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810
Step 3.5 Flash - - - - - - - -

Быстрое сравнение

Сменить пару сравнения