Mercury 2.5 Preview (medium) vs Nemotron 3 Ultra

Mercury 2.5 Preview (medium) лидирует по среднему баллу: 6.8 vs 5.9. Mercury 2.5 Preview (medium) имеет более низкую стоимость benchmark: $0.039 vs $0.164. Mercury 2.5 Preview (medium) быстрее: 6.66s vs 6.76s, с долей успешных попыток 66.7% vs 40.6%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-17

Сравниваемые модели

Ранг: #199
Общее число выходных токенов: 150,107
Время ответа (среднее): 6.66s
Общая стоимость: $0.039

Ранг: #285
Общее число выходных токенов: 11,544
Время ответа (среднее): 6.76s
Общая стоимость: $0.164

Рекомендуемая модель Mercury 2.5 Preview (medium)

Здесь у него лучший балл (6.8), при этом он примерно в 4.2 раза дешевле, чем Nemotron 3 Ultra.

Подробное сравнение

Метрика	Mercury 2.5 Preview Mercury 2.5 Preview medium Релиз: 2026-09-02	Nemotron 3 Ultra Nemotron 3 Ultra none Релиз: 2026-06-04 Бесплатно доступно

Метрика	Mercury 2.5 Preview Mercury 2.5 Preview medium Релиз: 2026-09-02	Nemotron 3 Ultra Nemotron 3 Ultra none Релиз: 2026-06-04 Бесплатно доступно
Оценка	6.8	5.9
Ранг	#199	#285
Надежность	10.0	10.0
Стабильность	9.6	9.3
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	66.7%	40.6%
Нестабильные тесты	1	2
Всего запусков	69	69
Стоимость за результат	0.244	0.000
Общая стоимость	$0.039	$0.164
Цена входа	$0.040 / 1M	$0.500 / 1M
Цена выхода	$0.150 / 1M	$2.200 / 1M
Цена чтения из кэша	Н/Д	$0.100 / 1M
Цена записи в кэш	Н/Д	Н/Д
Общее число входных токенов	397,291	275,381
Выходные токены	6,355	11,544
Токены рассуждений	143,752	0
Время ответа (среднее)	6.66s	6.76s
Время ответа (макс.)	74.63s	70.17s
Время ответа (суммарно)	153.29s	155.50s
Параметры	~100B	550B всего (55B активных)
Доступность	Закрытая модель	Веса доступны

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#199 Mercury 2.5 Preview

medium

Стоимость: $0.001
Время: 2.7s
Токены: 2,241 tok

#285 Nemotron 3 Ultra

none

Стоимость: $0.000
Время: 149.6s
Токены: 3,405 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	3.9	9.6	0.0%	0		74.63s	284,578	919	22,154
Nemotron 3 Ultra	5.0	10.0	0.0%	0		70.17s	174,213	2,074	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	10.0	10.0	100.0%	0		1.43s	781	203	7,921
Nemotron 3 Ultra	3.5	8.0	16.7%	1		2.35s	696	239	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	7.8	10.0	66.7%	0		3.86s	7,839	552	22,126
Nemotron 3 Ultra	5.5	10.0	33.3%	0		1.02s	7,623	369	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	6.5	10.0	50.0%	0		13.86s	92,663	3,607	41,588
Nemotron 3 Ultra	3.0	10.0	0.0%	0		21.14s	73,507	7,693	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	10.0	10.0	100.0%	0		2.77s	8,292	514	11,354
Nemotron 3 Ultra	10.0	10.0	100.0%	0		1.94s	7,944	249	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	5.3	7.2	44.4%	1		3.72s	853	62	17,120
Nemotron 3 Ultra	5.3	10.0	33.3%	0		758ms	682	23	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	5.0	10.0	0.0%	0		2.09s	538	99	3,375
Nemotron 3 Ultra	5.0	10.0	0.0%	0		13.49s	516	101	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	9.8	10.0	100.0%	0		1.35s	744	96	3,987
Nemotron 3 Ultra	10.0	10.0	100.0%	0		1.46s	723	69	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	10.0	10.0	100.0%	0		1.87s	771	274	7,323
Nemotron 3 Ultra	5.9	7.2	55.6%	1		1.06s	726	352	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	3.0	10.0	0.0%	0		2.37s	0	0	0
Nemotron 3 Ultra	10.0	10.0	100.0%	0		2.99s	8,544	264	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mercury 2.5 Preview	3.0	10.0	0.0%	0		4.13s	232	29	6,804
Nemotron 3 Ultra	3.0	10.0	0.0%	0		1.83s	207	111	0

Сменить пару сравнения