Навигация
AI BENCHY
Your ad here

AI BENCHY Compare

Inception: Mercury 2 vs Mistral: Mistral Small 4

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-04-11

Метрика Mercury 2 Mercury 2 none Релиз: 2026-02-24 Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16
Оценка 4.8 5.7
Ранг #85 #69
Стабильность 9.0 6.8
Тестов верно
Доля успешных попыток 27.8% 50.0%
Нестабильные тесты 2 7
Всего запусков 54 54
Стоимость за результат 0.165 0.674
Общая стоимость $0.007 $0.034
???? ????? $0.250 / 1M $0.150 / 1M
???? ?????? $0.750 / 1M $0.600 / 1M
Выходные токены 1,625 15,084
Токены рассуждений 0 39,408
Время ответа (среднее) 613ms 5.64s
Время ответа (макс.) 1.27s 30.49s
Время ответа (суммарно) 11.04s 101.52s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 3.0 10.0 0.0% 0 483ms 286 0
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 3.6 8.9 0.0% 0 969ms 310 0
Mistral Small 4 6.7 3.5 66.7% 1 30.49s 2,796 11,296
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 3.0 10.0 0.0% 0 606ms 131 0
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 7.3 5.9 83.3% 1 667ms 180 0
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 5.3 7.2 44.4% 1 534ms 46 0
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 4.8 10.0 0.0% 0 628ms 159 0
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 6.5 10.0 50.0% 0 551ms 82 0
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 3.1 10.0 0.0% 0 533ms 234 0
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 10.0 10.0 100.0% 0 1.27s 197 0
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810

Быстрое сравнение

Сменить пару сравнения

Mistral Small 4mediumvsQwen3.5-122B-A10BnoneMistral Small 4mediumvsGLM 4.7 FlashnoneMistral Small 4mediumvsGLM 5.1noneMercury 2nonevsQwen3 Coder NextmediumMistral Small 4mediumvsKimi K2.5noneMistral Small 4mediumvsGLM 5 TurbononeMercury 2nonevsGLM 4.7 FlashmediumMistral Small 4mediumvsQwen3.5-27BnoneMistral Small 4mediumvsGPT-5.4noneTrinity Large PreviewnoneБесплатно доступноvsMistral Small 4mediumMistral Small 4mediumvsMiMo-V2-PrononeMercury 2nonevsQwen3.5-9Bmedium