AI BENCHY Compare

Mistral: Mistral Small 4 vs Z.ai: GLM 4.7 Flash

Сводка

Сравнение benchmark Mistral Small 4 vs GLM 4.7 Flash: Mistral Small 4 лидирует по среднему баллу: 5.1 vs 4.9. GLM 4.7 Flash имеет более низкую стоимость benchmark: $0.004 vs $0.068. GLM 4.7 Flash быстрее: 2.86s vs 9.40s, с долей успешных попыток 44.4% vs 36.5%.

Рекомендуемая модель: GLM 4.7 Flash - Его балл близок к лучшему здесь (4.9 против 5.1), при этом он примерно в 20.2 раза дешевле, чем Mistral Small 4.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-30

Метрика	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16	GLM 4.7 Flash GLM 4.7 Flash none Релиз: 2026-01-19

Метрика	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16	GLM 4.7 Flash GLM 4.7 Flash none Релиз: 2026-01-19
Оценка	5.1	4.9
Ранг	#136	#144
Надежность	10.0	10.0
Стабильность	6.9	8.8
Тестов верно
Доля успешных попыток	44.4%	36.5%
Нестабильные тесты	8	3
Всего запусков	63	63
Стоимость за результат	1.344	0.056
Общая стоимость	$0.068	$0.004
Цена входа	$0.150 / 1M	$0.060 / 1M
Цена выхода	$0.600 / 1M	$0.400 / 1M
Общее число входных токенов	42,576	38,745
Выходные токены	24,184	2,521
Токены рассуждений	84,678	0
Время ответа (среднее)	9.40s	2.86s
Время ответа (макс.)	59.15s	7.05s
Время ответа (суммарно)	197.39s	40.04s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#136 Mistral Small 4

medium

Стоимость: $0.006
Время: 47.9s
Токены: 9,857 tok

#144 GLM 4.7 Flash

none

Неверный SVG

Стоимость: $0.000
Время: 300.0s
Токены: 0 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778
GLM 4.7 Flash	5.2	7.9	41.7%	1		5.51s	555	438	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715
GLM 4.7 Flash	4.3	10.0	0.0%	0		2.54s	7,256	650	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.0	10.0	0.0%	0		25.25s	18,706	2,612	10,700
GLM 4.7 Flash	3.0	10.0	0.0%	0		3.22s	14,325	704	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723
GLM 4.7 Flash	7.3	5.8	83.3%	1		4.82s	7,107	196	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	742	2,621	6,904
GLM 4.7 Flash	7.7	10.0	66.7%	0		744ms	687	19	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828
GLM 4.7 Flash	4.0	10.0	0.0%	0		1.59s	477	134	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031
GLM 4.7 Flash	6.5	10.0	50.0%	0		888ms	636	62	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632
GLM 4.7 Flash	6.4	10.0	33.3%	0		1.20s	609	97	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810
GLM 4.7 Flash	2.8	1.6	33.3%	1		7.05s	6,907	212	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557
GLM 4.7 Flash	3.0	10.0	0.0%	0		692ms	186	9	0

Быстрое сравнение

Сменить пару сравнения