Claude Haiku 5.5 (low) vs Nemotron 3 Ultra (medium)

Claude Haiku 5.5 (low) лидирует по среднему баллу: 8.6 vs 8.0. Claude Haiku 5.5 (low) имеет более низкую стоимость benchmark: $0.061 vs $0.674. Claude Haiku 5.5 (low) быстрее: 7.51s vs 40.33s, с долей успешных попыток 76.8% vs 68.1%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-17

Сравниваемые модели

Ранг: #74
Общее число выходных токенов: 61,650
Время ответа (среднее): 7.51s
Общая стоимость: $0.061

Ранг: #109
Общее число выходных токенов: 196,626
Время ответа (среднее): 40.33s
Общая стоимость: $0.674

Рекомендуемая модель Claude Haiku 5.5 (low)

Здесь у него лучший балл (8.6), при этом он примерно в 11.1 раза дешевле, чем Nemotron 3 Ultra (medium).

Подробное сравнение

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	Nemotron 3 Ultra Nemotron 3 Ultra medium Релиз: 2026-06-04 Бесплатно доступно

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	Nemotron 3 Ultra Nemotron 3 Ultra medium Релиз: 2026-06-04 Бесплатно доступно
Оценка	8.6	8.0
Ранг	#74	#109
Надежность	10.0	9.8
Стабильность	8.9	8.9
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	76.8%	68.1%
Нестабильные тесты	3	3
Всего запусков	69	69
Стоимость за результат	0.378	0.000
Общая стоимость	$0.061	$0.674
Цена входа	$0.100 / 1M	$0.500 / 1M
Цена выхода	$0.500 / 1M	$2.200 / 1M
Цена чтения из кэша	$0.010 / 1M	$0.100 / 1M
Цена записи в кэш	$0.125 / 1M	Н/Д
Общее число входных токенов	296,301	482,754
Выходные токены	10,672	62,455
Токены рассуждений	50,978	141,067
Время ответа (среднее)	7.51s	40.33s
Время ответа (макс.)	44.43s	392.56s
Время ответа (суммарно)	172.74s	927.65s
Параметры	~50B	550B всего (55B активных)
Доступность	Закрытая модель	Веса доступны

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#74 Claude Haiku 5.5

low

Стоимость: $0.001
Время: 7.4s
Токены: 1,851 tok

#109 Nemotron 3 Ultra

medium

Reached the allocated time limit (300 seconds) without receiving showcase output.

Стоимость: $0.000
Время: 300.0s
Токены: 0 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
Nemotron 3 Ultra	10.0	10.0	100.0%	0		188.06s	249,339	8,071	11,046

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
Nemotron 3 Ultra	10.0	10.0	100.0%	0		8.62s	780	835	1,485

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
Nemotron 3 Ultra	8.4	7.4	88.9%	1		26.53s	7,686	2,854	17,725

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
Nemotron 3 Ultra	6.3	5.8	66.7%	1		218.25s	204,249	40,954	78,561

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
Nemotron 3 Ultra	10.0	10.0	100.0%	0		5.68s	7,989	473	1,285

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
Nemotron 3 Ultra	3.6	7.2	22.2%	1		35.22s	785	7,637	18,208

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
Nemotron 3 Ultra	3.7	9.5	0.0%	0		2.52s	360	70	235

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
Nemotron 3 Ultra	9.8	10.0	100.0%	0		6.35s	765	182	1,243

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
Nemotron 3 Ultra	5.5	9.9	33.3%	0		3.54s	792	771	2,055

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
Nemotron 3 Ultra	10.0	10.0	100.0%	0		7.72s	9,781	304	984

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
Nemotron 3 Ultra	3.0	10.0	0.0%	0		38.47s	228	304	8,240

Сменить пару сравнения