Gemini 3.5 Flash (minimal) vs Mercury 2.5 (medium)

Mercury 2.5 (medium) лидирует по среднему баллу: 6.8 vs 6.7. Mercury 2.5 (medium) имеет более низкую стоимость benchmark: $0.022 vs $0.300. Gemini 3.5 Flash (minimal) быстрее: 2.65s vs 3.19s, с долей успешных попыток 60.6% vs 65.2%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-09-08

Сравниваемые модели

Ранг: #163
Общее число выходных токенов: 16,454
Время ответа (среднее): 2.65s
Общая стоимость: $0.300

Ранг: #157
Общее число выходных токенов: 120,129
Время ответа (среднее): 3.19s
Общая стоимость: $0.022

Рекомендуемая модель Mercury 2.5 (medium)

Здесь у него лучший балл (6.8), при этом он примерно в 13.8 раза дешевле, чем Gemini 3.5 Flash (minimal).

Подробное сравнение

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash minimal Релиз: 2026-05-19	Mercury 2.5 Mercury 2.5 medium Релиз: 2026-09-08

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash minimal Релиз: 2026-05-19	Mercury 2.5 Mercury 2.5 medium Релиз: 2026-09-08
Оценка	6.7	6.8
Ранг	#163	#157
Надежность	10.0	9.8
Стабильность	9.6	8.6
Попытки	66/66	66/66
Тестов верно
Доля успешных попыток	60.6%	65.2%
Нестабильные тесты	1	4
Всего запусков	66	66
Стоимость за результат	2.302	0.181
Общая стоимость	$0.300	$0.022
Цена входа	$1.500 / 1M	$0.040 / 1M
Цена выхода	$9.000 / 1M	$0.150 / 1M
Общее число входных токенов	100,762	91,402
Выходные токены	16,454	3,138
Токены рассуждений	0	116,991
Время ответа (среднее)	2.65s	3.19s
Время ответа (макс.)	25.26s	9.87s
Время ответа (суммарно)	58.21s	70.18s
Параметры	~500B всего (~20B активных)	~100B
Доступность	Закрытая модель	Закрытая модель

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#163 Gemini 3.5 Flash

minimal

Стоимость: $0.041
Время: 20.4s
Токены: 4,608 tok

#157 Mercury 2.5

medium

Стоимость: $0.001
Время: 3.8s
Токены: 3,386 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	6.5	10.0	50.0%	0		892ms	492	405	0
Mercury 2.5	10.0	10.0	100.0%	0		1.28s	773	192	7,122

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	5.6	9.9	33.3%	0		2.75s	8,122	3,456	0
Mercury 2.5	5.0	5.1	44.5%	2		3.70s	7,807	488	21,857

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		14.41s	76,686	11,581	0
Mercury 2.5	6.5	10.0	50.0%	0		9.23s	62,336	1,073	34,370

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.66s	7,548	279	0
Mercury 2.5	10.0	10.0	100.0%	0		2.57s	8,385	582	9,343

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	7.7	10.0	66.7%	0		879ms	642	12	0
Mercury 2.5	3.6	7.2	22.2%	1		4.39s	852	59	19,837

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		922ms	486	117	0
Mercury 2.5	4.4	9.9	0.0%	0		1.60s	528	98	2,364

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	6.4	5.8	66.7%	1		893ms	615	76	0
Mercury 2.5	6.4	6.0	66.7%	1		1.07s	520	55	2,344

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.45s	558	282	0
Mercury 2.5	10.0	10.0	100.0%	0		1.93s	766	290	7,721

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.79s	5,457	234	0
Mercury 2.5	10.0	10.0	100.0%	0		3.35s	9,203	269	4,641

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		1.76s	156	12	0
Mercury 2.5	3.0	10.0	0.0%	0		4.30s	232	32	7,392

Быстрое сравнение

Сменить пару сравнения

Gemini 3 Flash PreviewnonevsMercury 2.5medium Mercury 2.5mediumvsGLM 5.3low Gemini 3.5 FlashminimalvsLongCat 2.0low Mercury 2.5mediumvsGLM 5.2none Gemini 3.5 FlashminimalvsLongCat 2.0high Mercury 2.5mediumvsKAT-Coder-Pro V2.5none DeepSeek V4 PrononevsMercury 2.5medium Gemini 3.5 FlashminimalvsKAT-Coder-Pro V2.5none Gemini 3.5 FlashminimalvsGLM 5.2none Mercury 2.5mediumvsSolar Pro 4low Mercury 2.5mediumvsLongCat 2.0low Gemini 3.5 FlashminimalvsQwen3.5-27Bnone