AI BENCHY Compare

IBM: Granite 4.1 8B vs Mistral: Mistral Small 4

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-05-01

Метрика	Granite 4.1 8B Granite 4.1 8B none Релиз: 2026-05-01	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16

Метрика	Granite 4.1 8B Granite 4.1 8B none Релиз: 2026-05-01	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16
Оценка	4.3	5.7
Ранг	#135	#99
Надежность	10.0	Н/Д
Стабильность	10.0	6.8
Тестов верно
Доля успешных попыток	11.1%	50.0%
Нестабильные тесты	0	7
Всего запусков	54	54
Стоимость за результат	0.110	0.674
Общая стоимость	$0.003	$0.034
???? ?????	$0.050 / 1M	$0.150 / 1M
???? ??????	$0.100 / 1M	$0.600 / 1M
Выходные токены	2,712	15,084
Токены рассуждений	0	39,408
Время ответа (среднее)	767ms	5.64s
Время ответа (макс.)	2.17s	30.49s
Время ответа (суммарно)	13.81s	101.52s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Granite 4.1 8B	4.9	10.0	25.0%	0		844ms	903	0
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	4,055	4,778

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Granite 4.1 8B	6.9	10.0	0.0%	0		1.07s	339	0
Mistral Small 4	6.7	3.5	66.7%	1		30.49s	2,796	11,296

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Granite 4.1 8B	3.0	10.0	0.0%	0		1.88s	396	0
Mistral Small 4	3.0	10.0	0.0%	0		25.25s	2,612	10,700

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Granite 4.1 8B	3.0	10.0	0.0%	0		575ms	195	0
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	335	723

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Granite 4.1 8B	3.0	10.0	0.0%	0		357ms	24	0
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	2,621	6,904

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Granite 4.1 8B	4.0	10.0	0.0%	0		499ms	115	0
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	821	828

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Granite 4.1 8B	3.6	9.9	0.0%	0		344ms	66	0
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	540	1,031

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Granite 4.1 8B	3.7	10.0	0.0%	0		635ms	431	0
Mistral Small 4	3.4	9.7	0.0%	0		2.00s	983	2,338

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Granite 4.1 8B	10.0	10.0	100.0%	0		2.17s	243	0
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	321	810

Быстрое сравнение

Сменить пару сравнения

Mistral Small 4mediumvsGLM 4.7 Flashnone Granite 4.1 8BnonevsQwen3.5-9Bmedium Mistral Small 4mediumvsKimi K2.5none Mistral Small 4mediumvsGLM 5.1none Mistral Small 4mediumvsQwen3.6 Flashnone Mistral Small 4mediumvsGLM 5 Turbonone Mistral Small 4mediumvsMiMo-V2.5-Pronone Mistral Small 4mediumvsQwen3.5 Plus 2026-04-20none Mistral Small 4mediumvsKimi K2.6none Mistral Small 4mediumvsGPT-5.4none Mistral Small 4mediumvsQwen3.5-122B-A10Bnone Mistral Small 4mediumvsGrok 4.20none