Gemini 3.5 Flash (minimal) vs Mercury 2.5 (medium)

Средний балл практически равен: 6.4 vs 6.4. Mercury 2.5 (medium) имеет более низкую стоимость benchmark: $0.034 vs $0.508. Gemini 3.5 Flash (minimal) быстрее: 4.67s vs 7.74s, с долей успешных попыток 58.0% vs 63.8%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-19

Сравниваемые модели

Ранг: #247
Общее число выходных токенов: 18,040
Время ответа (среднее): 4.67s
Общая стоимость: $0.508

Ранг: #246
Общее число выходных токенов: 138,946
Время ответа (среднее): 7.74s
Общая стоимость: $0.034

Рекомендуемая модель Mercury 2.5 (medium)

Здесь у него лучший балл (6.4), при этом он примерно в 15.1 раза дешевле, чем Gemini 3.5 Flash (minimal).

Подробное сравнение

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash minimal Релиз: 2026-05-19	Mercury 2.5 Mercury 2.5 medium Релиз: 2026-09-08

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash minimal Релиз: 2026-05-19	Mercury 2.5 Mercury 2.5 medium Релиз: 2026-09-08
Оценка	6.4	6.4
Ранг	#247	#246
Надежность	10.0	9.7
Стабильность	9.6	8.3
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	58.0%	63.8%
Нестабильные тесты	1	5
Всего запусков	69	69
Стоимость за результат	3.903	0.280
Общая стоимость	$0.508	$0.034
Цена входа	$1.500 / 1M	$0.040 / 1M
Цена выхода	$9.000 / 1M	$0.150 / 1M
Цена чтения из кэша	$0.150 / 1M	$0.004 / 1M
Цена записи в кэш	$0.084 / 1M	Н/Д
Общее число входных токенов	230,004	317,982
Выходные токены	18,040	3,918
Токены рассуждений	0	135,028
Время ответа (среднее)	4.67s	7.74s
Время ответа (макс.)	49.23s	107.89s
Время ответа (суммарно)	107.45s	178.07s
Параметры	~500B всего (~20B активных)	~100B
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#247 Gemini 3.5 Flash

minimal

Стоимость: $0.041
Время: 20.4s
Токены: 4,608 tok

#246 Mercury 2.5

medium

Стоимость: $0.001
Время: 3.8s
Токены: 3,386 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	5.0	10.0	0.0%	0		49.23s	129,242	1,586	0
Mercury 2.5	4.7	3.1	33.3%	1		107.89s	226,580	780	18,037

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	6.5	10.0	50.0%	0		892ms	492	405	0
Mercury 2.5	10.0	10.0	100.0%	0		1.28s	773	192	7,122

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	5.6	9.9	33.3%	0		2.75s	8,122	3,456	0
Mercury 2.5	5.0	5.1	44.5%	2		3.70s	7,807	488	21,857

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		14.41s	76,686	11,581	0
Mercury 2.5	6.5	10.0	50.0%	0		9.23s	62,336	1,073	34,370

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.66s	7,548	279	0
Mercury 2.5	10.0	10.0	100.0%	0		2.57s	8,385	582	9,343

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	7.7	10.0	66.7%	0		879ms	642	12	0
Mercury 2.5	3.6	7.2	22.2%	1		4.39s	852	59	19,837

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		922ms	486	117	0
Mercury 2.5	4.4	9.9	0.0%	0		1.60s	528	98	2,364

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	6.4	5.8	66.7%	1		893ms	615	76	0
Mercury 2.5	6.4	6.0	66.7%	1		1.07s	520	55	2,344

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.45s	558	282	0
Mercury 2.5	10.0	10.0	100.0%	0		1.93s	766	290	7,721

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.79s	5,457	234	0
Mercury 2.5	10.0	10.0	100.0%	0		3.35s	9,203	269	4,641

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		1.76s	156	12	0
Mercury 2.5	3.0	10.0	0.0%	0		4.30s	232	32	7,392

Сменить пару сравнения

Gemini 3.5 FlashminimalvsMiMo-V2.5-Promedium Mercury 2.5mediumvsBeam 1.0 501B A23Blow Gemini 3.5 FlashminimalvsBeam 1.0 501B A23Blow Dots 3 Note PreviewhighБесплатно доступноvsGemini 3.5 Flashminimal Gemini 3.5 FlashminimalvsKimi K2.5medium Dots 3 Note PreviewhighБесплатно доступноvsMercury 2.5medium Dots 3 Note PreviewlowБесплатно доступноvsGemini 3.5 Flashminimal Dots 3 Note PreviewlowБесплатно доступноvsMercury 2.5medium Mercury 2.5mediumvsMinimax M3.1 FlashxhighБесплатно доступно Gemini 3.5 FlashminimalvsMinimax M3.1 FlashxhighБесплатно доступно Gemini 3.5 FlashminimalvsLongCat 2.0none Mercury 2.5mediumvsLongCat 2.0none