Gemini 3.7 Flash (low) vs Mistral Large 4 (medium)

Gemini 3.7 Flash (low) лидирует по среднему баллу: 9.4 vs 6.2. Gemini 3.7 Flash (low) имеет более низкую стоимость benchmark: $0.183 vs $1.456. Gemini 3.7 Flash (low) быстрее: 6.24s vs 265.03s, с долей успешных попыток 95.7% vs 55.1%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-06

Сравниваемые модели

Ранг: #25
Общее число выходных токенов: 38,453
Время ответа (среднее): 6.24s
Общая стоимость: $0.183

Ранг: #240
Общее число выходных токенов: 627,233
Время ответа (среднее): 265.03s
Общая стоимость: $1.456

Рекомендуемая модель Gemini 3.7 Flash (low)

Здесь у него лучший балл (9.4), при этом он примерно в 8.0 раза дешевле, чем Mistral Large 4 (medium).

Подробное сравнение

Метрика	Gemini 3.7 Flash Gemini 3.7 Flash low Релиз: 2026-08-14	Mistral Large 4 Mistral Large 4 medium Релиз: 2026-10-06

Метрика	Gemini 3.7 Flash Gemini 3.7 Flash low Релиз: 2026-08-14	Mistral Large 4 Mistral Large 4 medium Релиз: 2026-10-06
Оценка	9.4	6.2
Ранг	#25	#240
Надежность	10.0	9.2
Стабильность	9.3	7.6
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	95.7%	55.1%
Нестабильные тесты	2	7
Всего запусков	69	69
Стоимость за результат	0.868	16.168
Общая стоимость	$0.183	$1.456
Цена входа	$0.750 / 1M	$0.680 / 1M
Цена выхода	$3.750 / 1M	$2.090 / 1M
Цена чтения из кэша	$0.075 / 1M	$0.070 / 1M
Цена записи в кэш	$0.042 / 1M	Н/Д
Общее число входных токенов	188,519	212,024
Выходные токены	7,694	166,422
Токены рассуждений	30,759	562,095
Время ответа (среднее)	6.24s	265.03s
Время ответа (макс.)	58.75s	1760.20s
Время ответа (суммарно)	143.56s	6095.69s
Параметры	~500B всего (~20B активных)	1.05T всего (49B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#25 Gemini 3.7 Flash

low

Стоимость: $0.010
Время: 23.5s
Токены: 5,210 tok

#240 Mistral Large 4

medium

Стоимость: $0.011
Время: 63.4s
Токены: 5,291 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		58.75s	98,197	1,400	0
Mistral Large 4	6.1	3.1	66.7%	1		173.21s	135,844	7,482	13,709

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.54s	492	99	1,398
Mistral Large 4	8.3	10.0	75.0%	0		15.73s	705	1,087	7,308

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	7.6	7.2	77.8%	1		6.20s	8,118	461	11,508
Mistral Large 4	3.4	7.2	22.2%	1		1201.87s	7,189	33,530	303,140

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		13.00s	66,250	4,873	8,108
Mistral Large 4	7.3	5.8	83.3%	1		510.65s	51,756	8,436	82,002

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.15s	7,548	278	1,093
Mistral Large 4	10.0	10.0	100.0%	0		25.95s	7,314	1,046	7,861

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	8.2	7.2	88.9%	1		3.09s	642	12	3,029
Mistral Large 4	2.9	7.2	11.1%	1		288.04s	798	85,691	114,373

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.76s	486	81	1,043
Mistral Large 4	3.5	2.2	33.3%	1		39.33s	516	4,704	4,909

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.47s	615	72	1,778
Mistral Large 4	8.3	10.0	50.0%	0		24.62s	708	6,709	7,691

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.92s	558	166	1,580
Mistral Large 4	6.1	4.7	66.7%	2		41.40s	717	8,254	10,519

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		4.10s	5,457	241	160
Mistral Large 4	10.0	10.0	100.0%	0		19.19s	6,267	303	1,104

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.92s	156	11	1,062
Mistral Large 4	3.0	10.0	0.0%	0		84.68s	210	9,180	9,479

Быстрое сравнение

Сменить пару сравнения