AI BENCHY Compare

IBM: Granite 4.1 8B vs Nemotron 3 Ultra 550b A55b

Сводка

Сравнение benchmark Granite 4.1 8B vs Nemotron 3 Ultra 550b A55b: Nemotron 3 Ultra 550b A55b лидирует по среднему баллу: 8.1 vs 4.0. Granite 4.1 8B имеет более низкую стоимость benchmark: $0.003 vs $0.177. Granite 4.1 8B быстрее: 728ms vs 15.05s, с долей успешных попыток 9.5% vs 69.8%.

Рекомендуемая модель: Granite 4.1 8B - Он дает лучший общий компромисс: конкурентный балл (4.0), ниже стоимость, чем у Nemotron 3 Ultra 550b A55b, и сбалансированное время ответа.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-12

Метрика	Granite 4.1 8B Granite 4.1 8B none Релиз: 2026-05-01	Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Релиз: 2026-06-04 Бесплатно доступно

Метрика	Granite 4.1 8B Granite 4.1 8B none Релиз: 2026-05-01	Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Релиз: 2026-06-04 Бесплатно доступно
Оценка	4.0	8.1
Ранг	#163	#29
Надежность	10.0	9.7
Стабильность	10.0	8.8
Тестов верно
Доля успешных попыток	9.5%	69.8%
Нестабильные тесты	0	3
Всего запусков	63	63
Стоимость за результат	0.131	0.000
Общая стоимость	$0.003	$0.177
Цена входа	$0.050 / 1M	$0.500 / 1M
Цена выхода	$0.100 / 1M	$2.500 / 1M
Общее число входных токенов	46,285	46,813
Выходные токены	2,911	18,002
Токены рассуждений	0	53,091
Время ответа (среднее)	728ms	15.05s
Время ответа (макс.)	2.17s	43.93s
Время ответа (суммарно)	15.29s	316.09s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#163 IBM: Granite 4.1 8B

none

Cost: $0.001
Time: 3.2s
Tokens: 491 tok

#29 Nemotron 3 Ultra 550b A55b

medium

No showcase result has been generated for this model yet.

Cost: $0.000
Time: -
Tokens: 0 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Granite 4.1 8B	4.9	10.0	25.0%	0		844ms	645	903	0
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		8.62s	780	835	1,485

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Granite 4.1 8B	4.5	10.0	0.0%	0		775ms	8,344	525	0
Nemotron 3 Ultra 550b A55b	8.4	7.4	88.9%	1		26.53s	7,686	2,854	17,725

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Granite 4.1 8B	3.0	10.0	0.0%	0		1.88s	19,089	396	0
Nemotron 3 Ultra 550b A55b	9.8	10.0	100.0%	0		43.93s	17,574	1,040	3,590

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Granite 4.1 8B	3.0	10.0	0.0%	0		575ms	7,617	195	0
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		5.68s	7,989	473	1,285

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Granite 4.1 8B	3.0	10.0	0.0%	0		357ms	768	24	0
Nemotron 3 Ultra 550b A55b	3.5	4.4	33.3%	2		24.90s	858	11,169	16,249

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Granite 4.1 8B	4.0	10.0	0.0%	0		499ms	528	115	0
Nemotron 3 Ultra 550b A55b	3.7	9.5	0.0%	0		2.52s	360	70	235

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Granite 4.1 8B	3.6	9.9	0.0%	0		344ms	687	66	0
Nemotron 3 Ultra 550b A55b	9.8	10.0	100.0%	0		6.35s	765	182	1,243

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Granite 4.1 8B	3.2	10.0	0.0%	0		608ms	672	432	0
Nemotron 3 Ultra 550b A55b	5.5	9.9	33.3%	0		3.54s	792	771	2,055

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Granite 4.1 8B	10.0	10.0	100.0%	0		2.17s	7,719	243	0
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		7.72s	9,781	304	984

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Granite 4.1 8B	3.0	10.0	0.0%	0		306ms	216	12	0
Nemotron 3 Ultra 550b A55b	3.0	10.0	0.0%	0		38.47s	228	304	8,240

Быстрое сравнение

Сменить пару сравнения

DeepSeek V4 FlashhighvsNemotron 3 Ultra 550b A55bmediumБесплатно доступно Granite 4.1 8BnonevsQwen3.5-9Bmedium Granite 4.1 8BnonevsGLM 4.7 Flashmedium Nemotron 3 Ultra 550b A55bmediumБесплатно доступноvsGPT-5.2 Chatnone Nemotron 3 Ultra 550b A55bmediumБесплатно доступноvsStep 3.7 Flashlow Nemotron 3 Ultra 550b A55bmediumБесплатно доступноvsGPT-5.3 Chatnone Granite 4.1 8BnonevsQwen3 Coder Nextmedium Granite 4.1 8BnonevsMiniMax M2.5medium Gemini 3 Flash PreviewlowvsNemotron 3 Ultra 550b A55bmediumБесплатно доступно Claude Sonnet 4.6nonevsNemotron 3 Ultra 550b A55bmediumБесплатно доступно Claude Opus 4.8nonevsNemotron 3 Ultra 550b A55bmediumБесплатно доступно CobuddymediumvsGranite 4.1 8Bnone