AI BENCHY Compare

Google: Gemini 3.1 Flash Lite vs Mistral: Mistral Small 4

Сводка

Сравнение benchmark Gemini 3.1 Flash Lite vs Mistral Small 4: Gemini 3.1 Flash Lite лидирует по среднему баллу: 6.4 vs 5.1. Mistral Small 4 имеет более низкую стоимость benchmark: $0.007 vs $0.028. Mistral Small 4 быстрее: 630ms vs 1.89s, с долей успешных попыток 61.9% vs 27.0%.

Рекомендуемая модель: Gemini 3.1 Flash Lite - У него самый высокий балл в этом сравнении (6.4) и лучший общий баланс стоимости и времени ответа среди всех 2 моделей.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-12

Метрика	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite low Релиз: 2026-05-08	Mistral Small 4 Mistral Small 4 none Релиз: 2026-03-16

Метрика	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite low Релиз: 2026-05-08	Mistral Small 4 Mistral Small 4 none Релиз: 2026-03-16
Оценка	6.4	5.1
Ранг	#85	#136
Надежность	10.0	10.0
Стабильность	9.3	9.5
Тестов верно
Доля успешных попыток	61.9%	27.0%
Нестабильные тесты	2	1
Всего запусков	63	63
Стоимость за результат	0.227	0.139
Общая стоимость	$0.028	$0.007
Цена входа	$0.250 / 1M	$0.150 / 1M
Цена выхода	$1.500 / 1M	$0.600 / 1M
Общее число входных токенов	36,892	37,309
Выходные токены	2,732	2,201
Токены рассуждений	9,260	0
Время ответа (среднее)	1.89s	630ms
Время ответа (макс.)	5.66s	1.72s
Время ответа (суммарно)	39.62s	13.22s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#85 Gemini 3.1 Flash Lite

low

Cost: $0.003
Time: 4.0s
Tokens: 1,479 tok

#136 Mistral Small 4

none

Cost: $0.002
Time: 10.4s
Tokens: 2,370 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	7.3	6.2	75.0%	2		1.84s	500	1,013	1,548
Mistral Small 4	3.4	7.9	16.7%	1		395ms	708	182	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	5.5	10.0	33.3%	0		1.53s	8,132	471	1,072
Mistral Small 4	3.7	9.7	0.0%	0		901ms	7,636	619	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		4.48s	12,870	348	975
Mistral Small 4	3.0	10.0	0.0%	0		1.72s	11,640	496	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.44s	7,453	291	697
Mistral Small 4	10.0	10.0	100.0%	0		822ms	7,914	261	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	5.3	10.0	33.3%	0		1.52s	639	15	1,214
Mistral Small 4	5.3	10.0	33.3%	0		367ms	798	28	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	4.0	10.0	0.0%	0		1.37s	492	69	438
Mistral Small 4	4.0	10.0	0.0%	0		729ms	519	205	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.52s	619	72	760
Mistral Small 4	6.5	10.0	50.0%	0		380ms	729	69	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.40s	570	210	1,191
Mistral Small 4	3.1	9.9	0.0%	0		399ms	735	111	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		5.66s	5,457	234	945
Mistral Small 4	10.0	10.0	100.0%	0		1.40s	6,420	213	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		1.46s	160	9	420
Mistral Small 4	3.0	10.0	0.0%	0		397ms	210	17	0

Быстрое сравнение

Сменить пару сравнения