Mistral Small 4 vs Nemotron 3.5 Lightning (high)

Nemotron 3.5 Lightning (high) лидирует по среднему баллу: 5.2 vs 5.1. Mistral Small 4 имеет более низкую стоимость benchmark: $0.047 vs $0.111. Mistral Small 4 быстрее: 3.12s vs 77.08s, с долей успешных попыток 24.6% vs 47.8%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-01

Сравниваемые модели

Ранг: #292
Общее число выходных токенов: 10,913
Время ответа (среднее): 3.12s
Общая стоимость: $0.047

Ранг: #287
Общее число выходных токенов: 659,693
Время ответа (среднее): 77.08s
Общая стоимость: $0.111

Рекомендуемая модель Mistral Small 4

Его балл близок к лучшему здесь (5.1 против 5.2), при этом он примерно в 2.4 раза дешевле, чем Nemotron 3.5 Lightning (high).

Подробное сравнение

Метрика	Mistral Small 4 Mistral Small 4 none Релиз: 2026-03-16	Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Релиз: 2026-08-11 Бесплатно доступно

Метрика	Mistral Small 4 Mistral Small 4 none Релиз: 2026-03-16	Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Релиз: 2026-08-11 Бесплатно доступно
Оценка	5.1	5.2
Ранг	#292	#287
Надежность	10.0	9.6
Стабильность	9.6	5.7
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	24.6%	47.8%
Нестабильные тесты	1	12
Всего запусков	69	69
Стоимость за результат	0.928	0.000
Общая стоимость	$0.047	$0.111
Цена входа	$0.150 / 1M	$0.060 / 1M
Цена выхода	$0.600 / 1M	$0.160 / 1M
Общее число входных токенов	265,602	170,517
Выходные токены	10,913	149,968
Токены рассуждений	0	509,725
Время ответа (среднее)	3.12s	77.08s
Время ответа (макс.)	45.46s	490.99s
Время ответа (суммарно)	71.87s	1772.78s
Параметры	119B всего (6B активных)	30B всего (3B активных)
Доступность	Открытый исходный код	Веса доступны

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#292 Mistral Small 4

none

Стоимость: $0.002
Время: 10.4s
Токены: 2,370 tok

#287 Nemotron 3.5 Lightning

high

Стоимость: $0.000
Время: 92.8s
Токены: 11,343 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	5.0	10.0	0.0%	0		45.46s	160,885	1,101	0
Nemotron 3.5 Lightning	3.5	8.3	0.0%	0		490.99s	52,501	1,624	3,472

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.4	7.9	16.7%	1		395ms	708	182	0
Nemotron 3.5 Lightning	5.5	3.7	66.7%	3		10.29s	696	2,432	15,948

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.7	9.7	0.0%	0		901ms	7,636	619	0
Nemotron 3.5 Lightning	4.4	5.1	33.3%	2		168.41s	7,623	68,533	242,319

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.0	10.0	0.0%	0		7.44s	79,039	8,107	0
Nemotron 3.5 Lightning	6.4	10.0	50.0%	0		160.45s	90,257	17,550	119,725

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	10.0	10.0	100.0%	0		822ms	7,914	261	0
Nemotron 3.5 Lightning	7.3	5.9	83.3%	1		13.99s	7,944	3,210	16,835

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	5.3	10.0	33.3%	0		377ms	807	28	0
Nemotron 3.5 Lightning	2.9	4.4	22.2%	2		88.61s	798	45,616	72,496

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	4.0	10.0	0.0%	0		729ms	519	205	0
Nemotron 3.5 Lightning	3.7	9.5	0.0%	0		7.58s	516	4,331	4,408

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	6.5	10.0	50.0%	0		380ms	729	69	0
Nemotron 3.5 Lightning	8.5	6.8	83.3%	1		4.98s	723	502	3,779

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.1	9.9	0.0%	0		399ms	735	111	0
Nemotron 3.5 Lightning	3.6	1.8	44.4%	3		6.09s	726	1,236	9,851

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	10.0	10.0	100.0%	0		1.40s	6,420	213	0
Nemotron 3.5 Lightning	10.0	10.0	100.0%	0		6.92s	8,526	3,745	3,781

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.0	10.0	0.0%	0		397ms	210	17	0
Nemotron 3.5 Lightning	3.0	10.0	0.0%	0		77.98s	207	1,189	17,111

Быстрое сравнение

Сменить пару сравнения