Gemini 3.5 Flash (minimal) vs Mercury 2 (medium)

Mercury 2 (medium) лидирует по среднему баллу: 6.6 vs 6.4. Mercury 2 (medium) имеет более низкую стоимость benchmark: $0.121 vs $0.508. Mercury 2 (medium) быстрее: 4.40s vs 4.67s, с долей успешных попыток 58.0% vs 53.6%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-02

Сравниваемые модели

Ранг: #208
Общее число выходных токенов: 18,040
Время ответа (среднее): 4.67s
Общая стоимость: $0.508

Ранг: #190
Общее число выходных токенов: 96,943
Время ответа (среднее): 4.40s
Общая стоимость: $0.121

Рекомендуемая модель Mercury 2 (medium)

Здесь у него лучший балл (6.6), при этом он примерно в 4.2 раза дешевле, чем Gemini 3.5 Flash (minimal).

Подробное сравнение

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash minimal Релиз: 2026-05-19	Mercury 2 Mercury 2 medium Релиз: 2026-02-24

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash minimal Релиз: 2026-05-19	Mercury 2 Mercury 2 medium Релиз: 2026-02-24
Оценка	6.4	6.6
Ранг	#208	#190
Надежность	10.0	10.0
Стабильность	9.6	8.1
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	58.0%	53.6%
Нестабильные тесты	1	5
Всего запусков	69	69
Стоимость за результат	3.903	1.201
Общая стоимость	$0.508	$0.121
Цена входа	$1.500 / 1M	$0.250 / 1M
Цена выхода	$9.000 / 1M	$0.750 / 1M
Цена чтения из кэша	$0.150 / 1M	$0.025 / 1M
Цена записи в кэш	$0.084 / 1M	Н/Д
Общее число входных токенов	230,004	189,300
Выходные токены	18,040	10,854
Токены рассуждений	0	86,089
Время ответа (среднее)	4.67s	4.40s
Время ответа (макс.)	49.23s	34.92s
Время ответа (суммарно)	107.45s	96.81s
Параметры	~500B всего (~20B активных)	~100B
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#208 Gemini 3.5 Flash

minimal

Стоимость: $0.041
Время: 20.4s
Токены: 4,608 tok

#190 Mercury 2

medium

Стоимость: $0.002
Время: 2.1s
Токены: 1,702 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	5.0	10.0	0.0%	0		49.23s	129,242	1,586	0
Mercury 2	4.7	1.6	66.7%	1		34.92s	78,785	529	8,860

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	6.5	10.0	50.0%	0		892ms	492	405	0
Mercury 2	6.9	9.9	50.0%	0		1.12s	554	2,546	2,609

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	5.6	9.9	33.3%	0		2.75s	8,122	3,456	0
Mercury 2	8.2	7.7	77.8%	1		2.04s	7,065	296	11,328

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		14.41s	76,686	11,581	0
Mercury 2	6.7	9.1	50.0%	0		7.84s	87,365	6,533	20,474

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.66s	7,548	279	0
Mercury 2	7.3	5.9	83.3%	1		1.11s	6,234	183	1,656

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	7.7	10.0	66.7%	0		879ms	642	12	0
Mercury 2	2.9	4.4	22.2%	2		8.06s	1,638	53	31,177

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		922ms	486	117	0
Mercury 2	4.8	10.0	0.0%	0		821ms	456	137	542

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	6.4	5.8	66.7%	1		893ms	615	76	0
Mercury 2	10.0	10.0	100.0%	0		1.07s	340	14	958

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.45s	558	282	0
Mercury 2	5.4	10.0	33.3%	0		949ms	601	361	2,781

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.79s	5,457	234	0
Mercury 2	10.0	10.0	100.0%	0		1.89s	6,080	180	1,956

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		1.76s	156	12	0
Mercury 2	3.0	10.0	0.0%	0		2.58s	182	22	3,748

Быстрое сравнение

Сменить пару сравнения