Claude Sonnet 4.6 vs Nemotron 3 Ultra (medium)

Nemotron 3 Ultra (medium) лидирует по среднему баллу: 7.5 vs 7.3. Claude Sonnet 4.6 имеет более низкую стоимость benchmark: $0.661 vs $0.774. Claude Sonnet 4.6 быстрее: 8.12s vs 32.21s, с долей успешных попыток 57.6% vs 68.2%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-07-25

Ранг: #71
Общее число выходных токенов: 19,362
Время ответа (среднее): 8.12s
Общая стоимость: $0.661

Ранг: #58
Общее число выходных токенов: 185,978
Время ответа (среднее): 32.21s
Общая стоимость: $0.774

Рекомендуемая модель Claude Sonnet 4.6

Его балл близок к лучшему здесь (7.3 против 7.5), и он отвечает примерно в 4.0 раза быстрее, чем Nemotron 3 Ultra (medium).

Подробное сравнение

Метрика	Claude Sonnet 4.6 Claude Sonnet 4.6 none Релиз: 2026-02-17	Nemotron 3 Ultra Nemotron 3 Ultra medium Релиз: 2026-06-04 Бесплатно доступно

Метрика	Claude Sonnet 4.6 Claude Sonnet 4.6 none Релиз: 2026-02-17	Nemotron 3 Ultra Nemotron 3 Ultra medium Релиз: 2026-06-04 Бесплатно доступно
Оценка	7.3	7.5
Ранг	#71	#58
Надежность	10.0	9.8
Стабильность	9.7	8.5
Тестов верно
Доля успешных попыток	57.6%	68.2%
Нестабильные тесты	1	4
Всего запусков	66	66
Стоимость за результат	5.502	0.000
Общая стоимость	$0.661	$0.774
Цена входа	$3.000 / 1M	$0.600 / 1M
Цена выхода	$15.000 / 1M	$3.600 / 1M
Общее число входных токенов	123,264	233,488
Выходные токены	19,362	57,916
Токены рассуждений	0	128,062
Время ответа (среднее)	8.12s	32.21s
Время ответа (макс.)	51.18s	392.56s
Время ответа (суммарно)	121.78s	708.65s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#71 Claude Sonnet 4.6

none

Стоимость: $0.038
Время: 27.3s
Токены: 2,598 tok

#58 Nemotron 3 Ultra

medium

Неверный SVG

Стоимость: $0.000
Время: 300.0s
Токены: 0 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	4.8	10.0	25.0%	0		2.94s	636	1,214	0
Nemotron 3 Ultra	10.0	10.0	100.0%	0		8.62s	780	835	1,485

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	5.5	10.0	33.3%	0		5.19s	8,522	2,127	0
Nemotron 3 Ultra	8.4	7.4	88.9%	1		26.53s	7,686	2,854	17,725

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	9.8	10.0	100.0%	0		37.51s	91,402	13,663	0
Nemotron 3 Ultra	6.3	5.8	66.7%	1		218.25s	204,249	40,954	78,561

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	10.0	10.0	100.0%	0		3.43s	8,574	252	0
Nemotron 3 Ultra	10.0	10.0	100.0%	0		5.68s	7,989	473	1,285

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	7.7	10.0	66.7%	0		3.54s	759	413	0
Nemotron 3 Ultra	3.5	4.4	33.3%	2		24.90s	858	11,169	16,249

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	6.1	3.1	66.7%	1		2.56s	513	192	0
Nemotron 3 Ultra	3.7	9.5	0.0%	0		2.52s	360	70	235

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	6.5	10.0	50.0%	0		1.96s	690	90	0
Nemotron 3 Ultra	9.8	10.0	100.0%	0		6.35s	765	182	1,243

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	7.7	10.0	66.7%	0		2.53s	663	533	0
Nemotron 3 Ultra	5.5	9.9	33.3%	0		3.54s	792	771	2,055

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	10.0	10.0	100.0%	0		4.11s	11,301	447	0
Nemotron 3 Ultra	10.0	10.0	100.0%	0		7.72s	9,781	304	984

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	3.0	10.0	0.0%	0		4.67s	204	431	0
Nemotron 3 Ultra	3.0	10.0	0.0%	0		38.47s	228	304	8,240

Быстрое сравнение

Сменить пару сравнения