Mistral Small 4 (medium) vs Nemotron 3.5 Lightning (medium)

Средний балл практически равен: 5.1 vs 5.2. Mistral Small 4 (medium) имеет более низкую стоимость benchmark: $0.096 vs $0.193. Mistral Small 4 (medium) быстрее: 10.77s vs 69.64s, с долей успешных попыток 42.4% vs 47.0%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-08-11

Ранг: #211
Общее число выходных токенов: 131,824
Время ответа (среднее): 10.77s
Общая стоимость: $0.096

Ранг: #208
Общее число выходных токенов: 741,084
Время ответа (среднее): 69.64s
Общая стоимость: $0.193

Рекомендуемая модель Mistral Small 4 (medium)

Здесь у него лучший балл (5.1), при этом он примерно в 2.0 раза дешевле, чем Nemotron 3.5 Lightning (medium).

Подробное сравнение

Метрика	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16	Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium Релиз: 2026-08-11 Бесплатно доступно

Метрика	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16	Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium Релиз: 2026-08-11 Бесплатно доступно
Оценка	5.1	5.2
Ранг	#211	#208
Надежность	10.0	9.9
Стабильность	7.0	6.4
Покрытие бенчмарка	22/22 тестов · 66/66 попыток	22/22 тестов · 66/66 попыток
Тестов верно
Доля успешных попыток	42.4%	47.0%
Нестабильные тесты	8	10
Всего запусков	66	66
Стоимость за результат	1.913	0.000
Общая стоимость	$0.096	$0.193
Цена входа	$0.150 / 1M	$0.100 / 1M
Цена выхода	$0.600 / 1M	$0.250 / 1M
Общее число входных токенов	140,494	126,321
Выходные токены	39,462	156,554
Токены рассуждений	92,362	584,530
Время ответа (среднее)	10.77s	69.64s
Время ответа (макс.)	59.15s	437.11s
Время ответа (суммарно)	236.94s	1532.18s

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#211 Mistral Small 4

medium

Стоимость: $0.006
Время: 47.9s
Токены: 9,857 tok

#208 Nemotron 3.5 Lightning

medium

Для этой модели еще не сгенерирован результат showcase.

Стоимость: $0.000
Время: -
Токены: 0 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778
Nemotron 3.5 Lightning	6.9	7.9	66.7%	1		12.34s	696	6,904	20,862

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715
Nemotron 3.5 Lightning	4.4	5.1	33.3%	2		285.47s	7,623	78,065	297,359

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.0	10.0	0.0%	0		32.40s	116,624	17,890	18,384
Nemotron 3.5 Lightning	6.2	5.8	66.7%	1		136.91s	98,571	15,769	112,376

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723
Nemotron 3.5 Lightning	3.7	1.7	50.0%	2		23.24s	7,944	4,195	30,097

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	742	2,621	6,904
Nemotron 3.5 Lightning	2.9	7.2	11.1%	1		71.28s	789	45,509	80,965

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828
Nemotron 3.5 Lightning	5.5	10.0	0.0%	0		4.36s	516	3,127	3,157

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031
Nemotron 3.5 Lightning	8.5	6.8	83.3%	1		3.75s	723	531	4,404

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632
Nemotron 3.5 Lightning	4.2	4.4	44.5%	2		10.49s	726	1,170	18,195

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810
Nemotron 3.5 Lightning	10.0	10.0	100.0%	0		4.92s	8,526	154	2,518

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557
Nemotron 3.5 Lightning	3.0	10.0	0.0%	0		44.02s	207	1,130	14,597

Быстрое сравнение

Сменить пару сравнения

Mistral Small 4nonevsNemotron 3.5 LightningmediumБесплатно доступно Mistral Small 4mediumvsMiMo-V2.5none Nemotron 3.5 LightningmediumБесплатно доступноvsQwen3 Coder Nextnone Mistral Small 4mediumvsQwen3.5-9Bnone Mistral Small 4mediumvsQwen3 Coder Nextnone North Mini CodenoneБесплатно доступноvsMistral Small 4medium Nemotron 3.5 LightningmediumБесплатно доступноvsMiMo-V2.5none Nemotron 3.5 LightningmediumБесплатно доступноvsInklingnone Nemotron 3.5 LightningmediumБесплатно доступноvsQwen3.5-9Bnone North Mini CodenoneБесплатно доступноvsNemotron 3.5 LightningmediumБесплатно доступно Mistral Small 4mediumvsInklingnone Mistral Small 4mediumvsLaguna S 2.1lowБесплатно доступно