AI BENCHY Compare

Google: Gemma 4 26B A4B vs Mistral: Mistral Small 4

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-04-04

Метрика	Gemma 4 26B A4B Gemma 4 26B A4B none Релиз: 2026-04-03	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16

Метрика	Gemma 4 26B A4B Gemma 4 26B A4B none Релиз: 2026-04-03	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16
Оценка	6.3	5.6
Ранг	#53	#68
Стабильность	9.1	7.0
Тестов верно
Доля успешных попыток	47.1%	49.0%
Нестабильные тесты	2	6
Всего запусков	51	51
Стоимость за результат	0.068	0.502
Общая стоимость	$0.005	$0.026
???? ?????	$0.130 / 1M	$0.150 / 1M
???? ??????	$0.400 / 1M	$0.600 / 1M
Выходные токены	1,335	12,288
Токены рассуждений	0	28,112
Время ответа (среднее)	6.56s	4.18s
Время ответа (макс.)	57.10s	25.25s
Время ответа (суммарно)	111.54s	71.03s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Gemma 4 26B A4B	8.3	10.0	75.0%	0		1.28s	230	0
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	4,055	4,778

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Gemma 4 26B A4B	3.0	10.0	0.0%	0		30.53s	309	0
Mistral Small 4	3.0	10.0	0.0%	0		25.25s	2,612	10,700

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Gemma 4 26B A4B	10.0	10.0	100.0%	0		1.70s	285	0
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	335	723

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Gemma 4 26B A4B	3.6	7.2	22.2%	1		2.49s	27	0
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	2,621	6,904

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Gemma 4 26B A4B	4.0	10.0	0.0%	0		3.54s	85	0
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	821	828

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Gemma 4 26B A4B	4.4	6.9	16.7%	1		1.08s	75	0
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	540	1,031

Puzzle Solving	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Gemma 4 26B A4B	5.7	10.0	33.3%	0		739ms	114	0
Mistral Small 4	3.4	9.7	0.0%	0		2.00s	983	2,338

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Gemma 4 26B A4B	10.0	10.0	100.0%	0		57.10s	210	0
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	321	810

Быстрое сравнение

Сменить пару сравнения

Gemma 4 26B A4BnonevsGPT-5 Nanomedium Mistral Small 4mediumvsGLM 5 Turbonone Mistral Small 4mediumvsGLM 4.7 Flashnone Gemma 4 26B A4BnonevsGrok 4.20 Multi Agent Betamedium Mistral Small 4mediumvsQwen3.5-27Bnone Gemma 4 26B A4BnonevsMercury 2medium Mistral Small 4mediumvsGPT-5.4none Mistral Small 4mediumvsMiMo-V2-Pronone Mistral Small 4mediumvsQwen3.5-122B-A10Bnone Mistral Small 4mediumvsGrok 4.20none Mistral Small 4mediumvsGrok 4.20 Betanone Mistral Small 4mediumvsKimi K2.5none