Gemini 2.5 Flash vs Mistral Large 4

Mistral Large 4 лидирует по среднему баллу: 5.5 vs 5.5. Gemini 2.5 Flash имеет более низкую стоимость benchmark: $0.017 vs $0.353. Gemini 2.5 Flash быстрее: 6.00s vs 28.46s, с долей успешных попыток 37.7% vs 30.4%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-06

Сравниваемые модели

Ранг: #278
Общее число выходных токенов: 1,890
Время ответа (среднее): 6.00s
Общая стоимость: $0.017

Ранг: #274
Общее число выходных токенов: 84,218
Время ответа (среднее): 28.46s
Общая стоимость: $0.353

Рекомендуемая модель Gemini 2.5 Flash

Его балл близок к лучшему здесь (5.5 против 5.5), при этом он примерно в 21.1 раза дешевле, чем Mistral Large 4.

Подробное сравнение

Метрика	Gemini 2.5 Flash Gemini 2.5 Flash none Релиз: 2025-06-17	Mistral Large 4 Mistral Large 4 none Релиз: 2026-10-06

Метрика	Gemini 2.5 Flash Gemini 2.5 Flash none Релиз: 2025-06-17	Mistral Large 4 Mistral Large 4 none Релиз: 2026-10-06
Оценка	5.5	5.5
Ранг	#278	#274
Надежность	10.0	9.9
Стабильность	9.6	8.8
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	37.7%	30.4%
Нестабильные тесты	1	4
Всего запусков	69	69
Стоимость за результат	0.209	7.044
Общая стоимость	$0.017	$0.353
Цена входа	$0.300 / 1M	$0.680 / 1M
Цена выхода	$2.500 / 1M	$2.090 / 1M
Цена чтения из кэша	$0.030 / 1M	$0.070 / 1M
Цена записи в кэш	$0.084 / 1M	Н/Д
Общее число входных токенов	39,886	259,048
Выходные токены	1,890	84,218
Токены рассуждений	0	0
Время ответа (среднее)	6.00s	28.46s
Время ответа (макс.)	118.00s	385.10s
Время ответа (суммарно)	138.04s	654.47s
Параметры	~350B всего (~20B активных)	1.05T всего (49B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#278 Gemini 2.5 Flash

none

Неверный SVG

Стоимость: $0.164
Время: 215.5s
Токены: 65,659 tok

#274 Mistral Large 4

none

Стоимость: $0.004
Время: 26.7s
Токены: 1,923 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 2.5 Flash	3.0	10.0	0.0%	0		1.81s	0	0	0
Mistral Large 4	4.7	3.1	33.3%	1		95.35s	136,700	9,370	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 2.5 Flash	3.0	10.0	0.0%	0		582ms	492	102	0
Mistral Large 4	3.7	8.4	8.3%	1		1.52s	705	354	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 2.5 Flash	5.5	10.0	33.3%	0		736ms	8,122	483	0
Mistral Large 4	5.4	7.8	22.2%	1		153.02s	7,431	62,517	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 2.5 Flash	3.0	10.0	0.0%	0		61.19s	16,470	486	0
Mistral Large 4	3.0	10.0	0.0%	0		36.48s	97,682	10,963	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 2.5 Flash	10.0	10.0	100.0%	0		652ms	7,257	279	0
Mistral Large 4	10.0	10.0	100.0%	0		1.44s	7,314	189	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 2.5 Flash	3.6	7.2	22.2%	1		449ms	642	12	0
Mistral Large 4	3.0	10.0	0.0%	0		1.04s	798	21	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 2.5 Flash	5.0	10.0	0.0%	0		615ms	486	78	0
Mistral Large 4	5.1	10.0	0.0%	0		2.32s	516	182	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 2.5 Flash	10.0	10.0	100.0%	0		590ms	615	72	0
Mistral Large 4	6.5	10.0	50.0%	0		1.13s	708	60	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 2.5 Flash	7.7	10.0	66.7%	0		604ms	558	132	0
Mistral Large 4	6.1	7.1	55.6%	1		1.85s	717	327	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 2.5 Flash	10.0	10.0	100.0%	0		1.91s	5,088	234	0
Mistral Large 4	10.0	10.0	100.0%	0		3.60s	6,267	222	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 2.5 Flash	3.0	10.0	0.0%	0		1.15s	156	12	0
Mistral Large 4	3.0	10.0	0.0%	0		1.31s	210	13	0

Быстрое сравнение

Сменить пару сравнения

Mistral Large 4nonevsNemotron 3 SupermediumБесплатно доступно Gemini 2.5 FlashnonevsNemotron 3 SupermediumБесплатно доступно North Mini CodemediumБесплатно доступноvsGemini 2.5 Flashnone Gemini 2.5 FlashnonevsHy4 previewlow Mistral Large 4nonevsSpace Bunny Alphalow Gemini 2.5 FlashnonevsStep 3.5 Flashmedium North Mini CodemediumБесплатно доступноvsMistral Large 4none Dots 3 Note PreviewmediumБесплатно доступноvsMistral Large 4none Mistral Large 4nonevsHy4 previewlow Gemini 2.5 FlashnonevsGranite 4.2 8Blow Gemini 2.5 FlashnonevsSpace Bunny Alphalow Mistral Large 4nonevsGPT-5 Nanomedium