Mercury 2.5 Preview (low) vs Nemotron 3.5 Lightning (medium)

Nemotron 3.5 Lightning (medium) лидирует по среднему баллу: 5.1 vs 5.0. Mercury 2.5 Preview (low) имеет более низкую стоимость benchmark: $0.011 vs $0.156. Mercury 2.5 Preview (low) быстрее: 1.31s vs 70.11s, с долей успешных попыток 47.0% vs 48.5%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-09-02

Ранг: #254
Общее число выходных токенов: 31,975
Время ответа (среднее): 1.31s
Общая стоимость: $0.011

Ранг: #244
Общее число выходных токенов: 760,441
Время ответа (среднее): 70.11s
Общая стоимость: $0.156

Рекомендуемая модель Mercury 2.5 Preview (low)

Его балл близок к лучшему здесь (5.0 против 5.1), при этом он примерно в 15.3 раза дешевле, чем Nemotron 3.5 Lightning (medium).

Подробное сравнение

Метрика	Mercury 2.5 Preview Mercury 2.5 Preview low Релиз: 2026-09-02	Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium Релиз: 2026-08-11 Бесплатно доступно

Метрика	Mercury 2.5 Preview Mercury 2.5 Preview low Релиз: 2026-09-02	Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium Релиз: 2026-08-11 Бесплатно доступно
Оценка	5.0	5.1
Ранг	#254	#244
Надежность	10.0	9.9
Стабильность	7.0	6.0
Попытки	66/66	66/66
Тестов верно
Доля успешных попыток	47.0%	48.5%
Нестабильные тесты	8	11
Всего запусков	66	66
Стоимость за результат	0.169	0.000
Общая стоимость	$0.011	$0.156
Цена входа	$0.040 / 1M	$0.080 / 1M
Цена выхода	$0.150 / 1M	$0.200 / 1M
Общее число входных токенов	133,525	126,330
Выходные токены	7,259	165,702
Токены рассуждений	24,716	594,739
Время ответа (среднее)	1.31s	70.11s
Время ответа (макс.)	7.29s	437.11s
Время ответа (суммарно)	28.77s	1542.52s
Параметры	~100B	30B всего (3B активных)
Доступность	Закрытая модель	Веса доступны

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#254 Mercury 2.5 Preview

low

Стоимость: $0.001
Время: 1.5s
Токены: 1,169 tok

#244 Nemotron 3.5 Lightning

medium

Стоимость: $0.000
Время: 130.5s
Токены: 6,750 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	5.6	3.8	66.7%	3		759ms	786	290	3,019
Nemotron 3.5 Lightning	6.9	7.9	66.7%	1		12.34s	696	6,904	20,862

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	5.5	10.0	33.3%	0		972ms	7,794	695	2,263
Nemotron 3.5 Lightning	4.4	5.1	33.3%	2		285.47s	7,623	78,065	297,359

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	3.0	10.0	0.0%	0		4.77s	110,517	5,013	9,661
Nemotron 3.5 Lightning	6.2	5.8	66.7%	1		136.91s	98,571	15,769	112,376

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	6.3	5.8	66.7%	1		1.12s	8,309	611	1,521
Nemotron 3.5 Lightning	3.7	1.7	50.0%	2		23.24s	7,944	4,195	30,097

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	4.1	4.4	44.5%	2		836ms	849	45	2,247
Nemotron 3.5 Lightning	2.9	4.4	22.2%	2		74.73s	798	54,657	91,174

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	5.0	10.0	0.0%	0		1.05s	540	105	749
Nemotron 3.5 Lightning	5.5	10.0	0.0%	0		4.36s	516	3,127	3,157

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	6.3	10.0	50.0%	0		1.60s	745	99	1,492
Nemotron 3.5 Lightning	8.5	6.8	83.3%	1		3.75s	723	531	4,404

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	8.2	7.2	88.9%	1		710ms	777	312	2,271
Nemotron 3.5 Lightning	4.2	4.4	44.5%	2		10.49s	726	1,170	18,195

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	2.8	1.6	33.3%	1		1.57s	2,983	76	739
Nemotron 3.5 Lightning	10.0	10.0	100.0%	0		4.92s	8,526	154	2,518

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	3.0	10.0	0.0%	0		591ms	225	13	754
Nemotron 3.5 Lightning	3.0	10.0	0.0%	0		44.02s	207	1,130	14,597

Быстрое сравнение

Сменить пару сравнения