Gemini 3.5 Flash Lite (low) vs Mercury 2 (medium)

Mercury 2 (medium) лидирует по среднему баллу: 6.6 vs 6.3. Mercury 2 (medium) имеет более низкую стоимость benchmark: $0.121 vs $0.183. Mercury 2 (medium) быстрее: 4.40s vs 4.79s, с долей успешных попыток 66.7% vs 53.6%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-19

Сравниваемые модели

Ранг: #254
Общее число выходных токенов: 39,912
Время ответа (среднее): 4.79s
Общая стоимость: $0.183

Ранг: #223
Общее число выходных токенов: 96,943
Время ответа (среднее): 4.40s
Общая стоимость: $0.121

Рекомендуемая модель Mercury 2 (medium)

Здесь у него лучший балл (6.6), при этом он примерно в 1.5 раза дешевле, чем Gemini 3.5 Flash Lite (low).

Подробное сравнение

Метрика	Gemini 3.5 Flash Lite Gemini 3.5 Flash Lite low Релиз: 2026-07-21	Mercury 2 Mercury 2 medium Релиз: 2026-02-24

Метрика	Gemini 3.5 Flash Lite Gemini 3.5 Flash Lite low Релиз: 2026-07-21	Mercury 2 Mercury 2 medium Релиз: 2026-02-24
Оценка	6.3	6.6
Ранг	#254	#223
Надежность	10.0	10.0
Стабильность	7.9	8.1
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	66.7%	53.6%
Нестабильные тесты	6	5
Всего запусков	69	69
Стоимость за результат	1.521	1.201
Общая стоимость	$0.183	$0.121
Цена входа	$0.300 / 1M	$0.250 / 1M
Цена выхода	$2.500 / 1M	$0.750 / 1M
Цена чтения из кэша	$0.030 / 1M	$0.025 / 1M
Цена записи в кэш	$0.084 / 1M	Н/Д
Общее число входных токенов	275,779	189,300
Выходные токены	14,401	10,854
Токены рассуждений	25,511	86,089
Время ответа (среднее)	4.79s	4.40s
Время ответа (макс.)	53.91s	34.92s
Время ответа (суммарно)	110.24s	96.81s
Параметры	~150B всего (~10B активных)	~100B
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#254 Gemini 3.5 Flash Lite

low

Стоимость: $0.007
Время: 7.5s
Токены: 2,669 tok

#223 Mercury 2

medium

Стоимость: $0.002
Время: 2.1s
Токены: 1,702 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash Lite	5.0	10.0	0.0%	0		53.91s	136,614	1,502	0
Mercury 2	4.7	1.6	66.7%	1		34.92s	78,785	529	8,860

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash Lite	9.0	8.3	91.7%	1		1.69s	506	351	4,032
Mercury 2	6.9	9.9	50.0%	0		1.12s	554	2,546	2,609

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash Lite	4.3	10.0	0.0%	0		917ms	8,126	464	0
Mercury 2	8.2	7.7	77.8%	1		2.04s	7,065	296	11,328

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash Lite	3.8	1.6	50.0%	2		11.00s	114,540	11,142	9,298
Mercury 2	6.7	9.1	50.0%	0		7.84s	87,365	6,533	20,474

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		859ms	7,364	287	0
Mercury 2	7.3	5.9	83.3%	1		1.11s	6,234	183	1,656

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash Lite	5.9	7.2	55.6%	1		3.55s	658	18	6,902
Mercury 2	2.9	4.4	22.2%	2		8.06s	1,638	53	31,177

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		2.34s	488	97	1,049
Mercury 2	4.8	10.0	0.0%	0		821ms	456	137	542

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash Lite	9.8	10.0	100.0%	0		1.75s	621	70	1,872
Mercury 2	10.0	10.0	100.0%	0		1.07s	340	14	958

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash Lite	7.6	7.2	77.8%	1		1.19s	572	168	1,494
Mercury 2	5.4	10.0	33.3%	0		949ms	601	361	2,781

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		1.39s	6,132	293	0
Mercury 2	10.0	10.0	100.0%	0		1.89s	6,080	180	1,956

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash Lite	4.7	1.6	66.7%	1		1.65s	158	9	864
Mercury 2	3.0	10.0	0.0%	0		2.58s	182	22	3,748

Сменить пару сравнения