Claude Opus 4.8 (low) vs Gemini 3.7 Flash (low)

Gemini 3.7 Flash (low) лидирует по среднему баллу: 9.4 vs 7.2. Gemini 3.7 Flash (low) имеет более низкую стоимость benchmark: $0.183 vs $3.787. Gemini 3.7 Flash (low) быстрее: 6.24s vs 17.13s, с долей успешных попыток 78.3% vs 95.7%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-19

Сравниваемые модели

Ранг: #172
Общее число выходных токенов: 69,489
Время ответа (среднее): 17.13s
Общая стоимость: $3.787

Ранг: #26
Общее число выходных токенов: 38,453
Время ответа (среднее): 6.24s
Общая стоимость: $0.183

Рекомендуемая модель Gemini 3.7 Flash (low)

Здесь у него лучший балл (9.4), при этом он примерно в 20.8 раза дешевле, чем Claude Opus 4.8 (low).

Подробное сравнение

Метрика	Claude Opus 4.8 Claude Opus 4.8 low Релиз: 2026-05-28	Gemini 3.7 Flash Gemini 3.7 Flash low Релиз: 2026-08-14

Метрика	Claude Opus 4.8 Claude Opus 4.8 low Релиз: 2026-05-28	Gemini 3.7 Flash Gemini 3.7 Flash low Релиз: 2026-08-14
Оценка	7.2	9.4
Ранг	#172	#26
Надежность	10.0	10.0
Стабильность	8.6	9.3
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	78.3%	95.7%
Нестабильные тесты	4	2
Всего запусков	69	69
Стоимость за результат	23.669	0.868
Общая стоимость	$3.787	$0.183
Цена входа	$5.000 / 1M	$0.750 / 1M
Цена выхода	$25.000 / 1M	$3.750 / 1M
Цена чтения из кэша	$0.500 / 1M	$0.075 / 1M
Цена записи в кэш	$6.250 / 1M	$0.042 / 1M
Общее число входных токенов	409,947	188,519
Выходные токены	46,060	7,694
Токены рассуждений	23,429	30,759
Время ответа (среднее)	17.13s	6.24s
Время ответа (макс.)	127.97s	58.75s
Время ответа (суммарно)	394.01s	143.56s
Параметры	~5T всего (~500B активных)	~500B всего (~20B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#172 Claude Opus 4.8

low

Стоимость: $0.031
Время: 14.1s
Токены: 1,345 tok

#26 Gemini 3.7 Flash

low

Стоимость: $0.010
Время: 23.5s
Токены: 5,210 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	4.7	3.1	33.3%	1		110.68s	253,425	3,004	14,248
Gemini 3.7 Flash	10.0	10.0	100.0%	0		58.75s	98,197	1,400	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	10.0	10.0	100.0%	0		3.30s	834	793	371
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.54s	492	99	1,398

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	6.6	4.6	77.8%	2		7.58s	10,590	3,637	809
Gemini 3.7 Flash	7.6	7.2	77.8%	1		6.20s	8,118	461	11,508

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	9.9	10.0	100.0%	0		36.87s	119,079	13,586	2,867
Gemini 3.7 Flash	10.0	10.0	100.0%	0		13.00s	66,250	4,873	8,108

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	6.3	5.8	66.7%	1		2.27s	10,503	310	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.15s	7,548	278	1,093

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	5.3	10.0	33.3%	0		46.54s	972	23,226	4,472
Gemini 3.7 Flash	8.2	7.2	88.9%	1		3.09s	642	12	3,029

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	10.0	10.0	100.0%	0		2.55s	708	231	0
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.76s	486	81	1,043

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	9.8	10.0	100.0%	0		2.78s	909	111	221
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.47s	615	72	1,778

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	10.0	10.0	100.0%	0		3.01s	894	592	184
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.92s	558	166	1,580

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	10.0	10.0	100.0%	0		6.85s	11,775	370	35
Gemini 3.7 Flash	10.0	10.0	100.0%	0		4.10s	5,457	241	160

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	3.0	10.0	0.0%	0		5.48s	258	200	222
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.92s	156	11	1,062

Сменить пару сравнения