AI BENCHY Compare

Nemotron 3 Ultra 550b A55b vs Grok 4.20 Beta

Сводка

Сравнение benchmark Nemotron 3 Ultra 550b A55b vs Grok 4.20 Beta: Nemotron 3 Ultra 550b A55b лидирует по среднему баллу: 7.5 vs 5.8. Grok 4.20 Beta имеет более низкую стоимость benchmark: $0.087 vs $0.177. Grok 4.20 Beta быстрее: 1.19s vs 15.05s, с долей успешных попыток 69.8% vs 37.0%.

Рекомендуемая модель: Grok 4.20 Beta - Он дает лучший общий компромисс: конкурентный балл (5.8), ниже стоимость, чем у Nemotron 3 Ultra 550b A55b, и сбалансированное время ответа.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-10

Метрика	Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Релиз: 2026-06-04 Бесплатно доступно	Grok 4.20 Beta Grok 4.20 Beta none Релиз: 2026-03-12

Метрика	Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Релиз: 2026-06-04 Бесплатно доступно	Grok 4.20 Beta Grok 4.20 Beta none Релиз: 2026-03-12
Оценка	7.5	5.8
Ранг	#42	#107
Надежность	9.7	Н/Д
Стабильность	8.8	9.6
Тестов верно
Доля успешных попыток	69.8%	37.0%
Нестабильные тесты	3	1
Всего запусков	63	52
Стоимость за результат	0.000	1.510
Общая стоимость	$0.177	$0.087
Цена входа	$0.500 / 1M	$2.041 / 1M
Цена выхода	$2.500 / 1M	$2.041 / 1M
Общее число входных токенов	46,813	40,597
Выходные токены	18,002	1,657
Токены рассуждений	53,091	0
Время ответа (среднее)	15.05s	1.19s
Время ответа (макс.)	43.93s	6.48s
Время ответа (суммарно)	316.09s	21.43s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#42 Nemotron 3 Ultra 550b A55b

medium

No showcase result has been generated for this model yet.

Cost: $0.000
Time: -
Tokens: 0 tok

#107 Grok 4.20 Beta

none

Invalid SVG

Cost: $0.004
Time: 8.5s
Tokens: 1,672 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		8.62s	780	835	1,485
Grok 4.20 Beta	4.0	8.4	16.7%	1		597ms	1,986	251	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Nemotron 3 Ultra 550b A55b	8.4	7.4	88.9%	1		26.53s	7,686	2,854	17,725
Grok 4.20 Beta	5.5	10.0	0.0%	0		1.14s	358	74	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Nemotron 3 Ultra 550b A55b	9.8	10.0	100.0%	0		43.93s	17,574	1,040	3,590
Grok 4.20 Beta	3.0	10.0	0.0%	0		6.48s	17,673	282	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		5.68s	7,989	473	1,285
Grok 4.20 Beta	10.0	10.0	100.0%	0		601ms	7,749	197	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Nemotron 3 Ultra 550b A55b	3.5	4.4	33.3%	2		24.90s	858	11,169	16,249
Grok 4.20 Beta	3.0	10.0	0.0%	0		611ms	1,746	160	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Nemotron 3 Ultra 550b A55b	3.7	9.5	0.0%	0		2.52s	360	70	235
Grok 4.20 Beta	5.0	10.0	0.0%	0		541ms	819	87	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Nemotron 3 Ultra 550b A55b	9.8	10.0	100.0%	0		6.35s	765	182	1,243
Grok 4.20 Beta	6.3	10.0	50.0%	0		649ms	1,350	60	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Nemotron 3 Ultra 550b A55b	5.5	9.9	33.3%	0		3.54s	792	771	2,055
Grok 4.20 Beta	7.7	10.0	66.7%	0		586ms	1,671	357	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		7.72s	9,781	304	984
Grok 4.20 Beta	10.0	10.0	100.0%	0		4.79s	7,245	189	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Nemotron 3 Ultra 550b A55b	3.0	10.0	0.0%	0		38.47s	228	304	8,240
Grok 4.20 Beta	-	-	-	-	-	-	-	-	-

Быстрое сравнение

Сменить пару сравнения