Навигация
AI BENCHY
Your ad here

AI BENCHY Compare

Mistral: Mistral Small 4 vs StepFun: Step 3.5 Flash

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-03-17

Метрика Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16 Step 3.5 Flash Step 3.5 Flash medium Релиз: 2026-02-01 Бесплатно доступно
Ранг #55 #22
Оценка 5.6 7.9
Стабильность 7.0 9.1
Стоимость за результат 0.502 0.000
Общая стоимость $0.026 $0.000
Тестов верно
Доля успешных попыток 49.0% 70.6%
Нестабильные тесты 6 2
Всего запусков 51 49
Выходные токены 12,288 71,904
Токены рассуждений 28,112 155,607
Время ответа (среднее) 4.18s 26.78s
Время ответа (макс.) 25.25s 170.45s
Время ответа (суммарно) 71.03s 294.58s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Step 3.5 Flash 10.0 10.0 100.0% 0 13.56s 14,376 17,668
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 1,176 12,984
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 600 13,886
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Step 3.5 Flash 5.3 7.2 44.4% 1 170.45s 45,350 90,436
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Step 3.5 Flash 5.5 10.0 0.0% 0 6.54s 2,214 2,584
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Step 3.5 Flash 8.5 6.8 83.3% 1 4.98s 2,284 3,412
Puzzle Solving Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Step 3.5 Flash 5.3 10.0 33.3% 0 7.72s 5,629 10,835
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810
Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 275 3,802

Быстрое сравнение

Сменить пару сравнения

Mistral Small 4mediumvsGLM 5 TurbononeMistral Small 4mediumvsGLM 4.7 FlashnoneMistral Small 4mediumvsQwen3.5-27BnoneMistral Small 4mediumvsGPT-5.4noneGemini 3.1 Flash Lite PreviewnonevsStep 3.5 FlashmediumБесплатно доступноGPT-5.2 ChatnonevsStep 3.5 FlashmediumБесплатно доступноGemini 3 Flash PreviewnonevsStep 3.5 FlashmediumБесплатно доступноGemini 3.1 Flash Lite PreviewlowvsStep 3.5 FlashmediumБесплатно доступноMistral Small 4mediumvsQwen3.5-122B-A10BnoneMistral Small 4mediumvsGrok 4.20 BetanoneMistral Small 4mediumvsKimi K2.5noneMistral Small 4mediumvsHunter Alphanone