Навигация
AI BENCHY
Your ad here

AI BENCHY Compare

Mistral: Mistral Small 4 vs Nemotron 3 Super 120b A12b

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-03-17

Метрика Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16 Nemotron 3 Super 120b A12b Nemotron 3 Super 120b A12b none Релиз: 2026-03-11 Бесплатно доступно
Ранг #55 #62
Оценка 5.6 5.2
Стабильность 7.0 8.6
Стоимость за результат 0.502 0.000
Общая стоимость $0.026 $0.000
Тестов верно
Доля успешных попыток 49.0% 35.3%
Нестабильные тесты 6 3
Всего запусков 51 49
Выходные токены 12,288 4,225
Токены рассуждений 28,112 0
Время ответа (среднее) 4.18s 8.86s
Время ответа (макс.) 25.25s 24.97s
Время ответа (суммарно) 71.03s 150.70s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Nemotron 3 Super 120b A12b 4.8 10.0 25.0% 0 7.43s 2,174 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Nemotron 3 Super 120b A12b 3.0 10.0 0.0% 0 19.98s 124 0
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Nemotron 3 Super 120b A12b 10.0 10.0 100.0% 0 7.92s 249 0
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Nemotron 3 Super 120b A12b 3.6 7.2 22.2% 1 6.23s 26 0
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Nemotron 3 Super 120b A12b 4.2 9.9 0.0% 0 24.97s 170 0
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Nemotron 3 Super 120b A12b 4.9 6.9 33.3% 1 1.50s 66 0
Puzzle Solving Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Nemotron 3 Super 120b A12b 5.7 10.0 33.3% 0 7.50s 1,135 0
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810
Nemotron 3 Super 120b A12b 4.7 1.6 66.7% 1 16.00s 281 0

Быстрое сравнение

Сменить пару сравнения