Claude Opus 4.8 (low) vs Gemini 3.5 Flash Lite (medium)

Gemini 3.5 Flash Lite (medium) лидирует по среднему баллу: 7.3 vs 7.2. Gemini 3.5 Flash Lite (medium) имеет более низкую стоимость benchmark: $0.440 vs $3.787. Gemini 3.5 Flash Lite (medium) быстрее: 8.68s vs 17.13s, с долей успешных попыток 78.3% vs 76.8%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-11-13

Сравниваемые модели

Ранг: #211
Общее число выходных токенов: 69,489
Время ответа (среднее): 17.13s
Общая стоимость: $3.787

Ранг: #205
Общее число выходных токенов: 129,214
Время ответа (среднее): 8.68s
Общая стоимость: $0.440

Рекомендуемая модель Gemini 3.5 Flash Lite (medium)

Здесь у него лучший балл (7.3), при этом он примерно в 8.6 раза дешевле, чем Claude Opus 4.8 (low).

Подробное сравнение

Метрика	Claude Opus 4.8 Claude Opus 4.8 low Релиз: 2026-05-28	Gemini 3.5 Flash Lite Gemini 3.5 Flash Lite medium Релиз: 2026-07-21

Метрика	Claude Opus 4.8 Claude Opus 4.8 low Релиз: 2026-05-28	Gemini 3.5 Flash Lite Gemini 3.5 Flash Lite medium Релиз: 2026-07-21
Оценка	7.2	7.3
Ранг	#211	#205
Надежность	10.0	10.0
Стабильность	8.6	7.6
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	78.3%	76.8%
Нестабильные тесты	4	7
Всего запусков	69	69
Стоимость за результат	23.669	3.140
Общая стоимость	$3.787	$0.440
Цена входа	$5.000 / 1M	$0.300 / 1M
Цена выхода	$25.000 / 1M	$2.500 / 1M
Цена чтения из кэша	$0.500 / 1M	$0.030 / 1M
Цена записи в кэш	$6.250 / 1M	$0.084 / 1M
Общее число входных токенов	409,947	388,307
Выходные токены	46,060	10,412
Токены рассуждений	23,429	118,802
Время ответа (среднее)	17.13s	8.68s
Время ответа (макс.)	127.97s	86.92s
Время ответа (суммарно)	394.01s	199.65s
Параметры	~5T всего (~500B активных)	~150B всего (~10B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#211 Claude Opus 4.8

low

Стоимость: $0.031
Время: 14.1s
Токены: 1,345 tok

#205 Gemini 3.5 Flash Lite

medium

Стоимость: $0.010
Время: 17.8s
Токены: 4,000 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	4.7	3.1	33.3%	1		110.68s	253,425	3,004	14,248
Gemini 3.5 Flash Lite	4.7	3.1	33.3%	1		86.92s	284,391	1,520	31,459

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	10.0	10.0	100.0%	0		3.30s	834	793	371
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		2.11s	504	150	5,265

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	6.6	4.6	77.8%	2		7.58s	10,590	3,637	809
Gemini 3.5 Flash Lite	7.9	9.9	66.7%	0		9.96s	8,122	471	28,930

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	9.9	10.0	100.0%	0		36.87s	119,079	13,586	2,867
Gemini 3.5 Flash Lite	7.3	5.8	83.3%	1		17.87s	79,299	7,303	29,209

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	6.3	5.8	66.7%	1		2.27s	10,503	310	0
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		2.11s	7,362	287	2,226

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	5.3	10.0	33.3%	0		46.54s	972	23,226	4,472
Gemini 3.5 Flash Lite	4.1	4.4	44.5%	2		5.34s	656	17	10,964

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	10.0	10.0	100.0%	0		2.55s	708	231	0
Gemini 3.5 Flash Lite	4.7	3.1	33.3%	1		2.97s	488	100	1,558

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	9.8	10.0	100.0%	0		2.78s	909	111	221
Gemini 3.5 Flash Lite	9.8	10.0	100.0%	0		1.72s	625	69	2,657

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	10.0	10.0	100.0%	0		3.01s	894	592	184
Gemini 3.5 Flash Lite	8.2	7.2	88.9%	1		1.82s	570	199	2,988

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	10.0	10.0	100.0%	0		6.85s	11,775	370	35
Gemini 3.5 Flash Lite	10.0	10.0	100.0%	0		2.84s	6,132	287	1,277

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Opus 4.8	3.0	10.0	0.0%	0		5.48s	258	200	222
Gemini 3.5 Flash Lite	2.8	1.6	33.3%	1		3.75s	158	9	2,269

Сменить пару сравнения