Claude Opus 4.8 vs Gemini 3.7 Flash (low)

Gemini 3.7 Flash (low) лидирует по среднему баллу: 9.4 vs 6.9. Gemini 3.7 Flash (low) имеет более низкую стоимость benchmark: $0.183 vs $2.334. Gemini 3.7 Flash (low) быстрее: 6.24s vs 7.54s, с долей успешных попыток 60.9% vs 95.7%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-09

Сравниваемые модели

Ранг: #179
Общее число выходных токенов: 24,343
Время ответа (среднее): 7.54s
Общая стоимость: $2.334

Ранг: #25
Общее число выходных токенов: 38,453
Время ответа (среднее): 6.24s
Общая стоимость: $0.183

Рекомендуемая модель Gemini 3.7 Flash (low)

Здесь у него лучший балл (9.4), при этом он примерно в 12.8 раза дешевле, чем Claude Opus 4.8.

Подробное сравнение

Метрика	Claude Opus 4.8 Claude Opus 4.8 none Релиз: 2026-05-28	Gemini 3.7 Flash Gemini 3.7 Flash low Релиз: 2026-08-14

Метрика	Claude Opus 4.8 Claude Opus 4.8 none Релиз: 2026-05-28	Gemini 3.7 Flash Gemini 3.7 Flash low Релиз: 2026-08-14
Оценка	6.9	9.4
Ранг	#179	#25
Надежность	10.0	10.0
Стабильность	9.3	9.3
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	60.9%	95.7%
Нестабильные тесты	2	2
Всего запусков	69	69
Стоимость за результат	17.953	0.868
Общая стоимость	$2.334	$0.183
Цена входа	$5.000 / 1M	$0.750 / 1M
Цена выхода	$25.000 / 1M	$3.750 / 1M
Цена чтения из кэша	$0.500 / 1M	$0.075 / 1M
Цена записи в кэш	$6.250 / 1M	$0.042 / 1M
Общее число входных токенов	345,059	188,519
Выходные токены	24,343	7,694
Токены рассуждений	0	30,759
Время ответа (среднее)	7.54s	6.24s
Время ответа (макс.)	65.07s	58.75s
Время ответа (суммарно)	173.31s	143.56s
Параметры	~5T всего (~500B активных)	~500B всего (~20B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#179 Claude Opus 4.8

none

Стоимость: $0.053
Время: 22.0s
Токены: 2,253 tok

#25 Gemini 3.7 Flash

low

Стоимость: $0.010
Время: 23.5s
Токены: 5,210 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	5.0	10.0	0.0%	0		65.07s	195,856	7,546	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		58.75s	98,197	1,400	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	6.5	10.0	50.0%	0		3.40s	834	1,472	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.54s	492	99	1,398

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	5.5	10.0	33.3%	0		3.29s	10,590	1,332	0
Gemini 3.7 Flash	7.6	7.2	77.8%	1		6.20s	8,118	461	11,508

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	9.8	10.0	100.0%	0		26.38s	111,760	11,949	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		13.00s	66,250	4,873	8,108

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	7.3	5.8	83.3%	1		1.77s	10,503	308	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.15s	7,548	278	1,093

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	5.3	7.2	44.4%	1		1.76s	972	61	0
Gemini 3.7 Flash	8.2	7.2	88.9%	1		3.09s	642	12	3,029

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	10.0	10.0	100.0%	0		3.48s	708	230	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.76s	486	81	1,043

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	9.9	10.0	100.0%	0		1.37s	909	95	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.47s	615	72	1,778

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	7.7	10.0	66.7%	0		2.74s	894	783	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.92s	558	166	1,580

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	10.0	10.0	100.0%	0		5.35s	11,775	355	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		4.10s	5,457	241	160

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	3.0	10.0	0.0%	0		3.41s	258	212	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.92s	156	11	1,062

Сменить пару сравнения