Claude Haiku 5.5 (max) vs Gemini 3.7 Flash (low)

Gemini 3.7 Flash (low) лидирует по среднему баллу: 9.4 vs 8.5. Gemini 3.7 Flash (low) имеет более низкую стоимость benchmark: $0.183 vs $0.509. Gemini 3.7 Flash (low) быстрее: 6.24s vs 61.71s, с долей успешных попыток 85.5% vs 95.7%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-07

Сравниваемые модели

Ранг: #70
Общее число выходных токенов: 919,699
Время ответа (среднее): 61.71s
Общая стоимость: $0.509

Ранг: #25
Общее число выходных токенов: 38,453
Время ответа (среднее): 6.24s
Общая стоимость: $0.183

Рекомендуемая модель Gemini 3.7 Flash (low)

Здесь у него лучший балл (9.4), при этом он примерно в 2.8 раза дешевле, чем Claude Haiku 5.5 (max).

Подробное сравнение

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 max Релиз: 2026-10-07	Gemini 3.7 Flash Gemini 3.7 Flash low Релиз: 2026-08-14

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 max Релиз: 2026-10-07	Gemini 3.7 Flash Gemini 3.7 Flash low Релиз: 2026-08-14
Оценка	8.5	9.4
Ранг	#70	#25
Надежность	10.0	10.0
Стабильность	9.6	9.3
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	85.5%	95.7%
Нестабильные тесты	1	2
Всего запусков	69	69
Стоимость за результат	2.677	0.868
Общая стоимость	$0.509	$0.183
Цена входа	$0.100 / 1M	$0.750 / 1M
Цена выхода	$0.500 / 1M	$3.750 / 1M
Цена чтения из кэша	$0.010 / 1M	$0.075 / 1M
Цена записи в кэш	$0.125 / 1M	$0.042 / 1M
Общее число входных токенов	487,516	188,519
Выходные токены	10,212	7,694
Токены рассуждений	909,487	30,759
Время ответа (среднее)	61.71s	6.24s
Время ответа (макс.)	288.94s	58.75s
Время ответа (суммарно)	1419.40s	143.56s
Параметры	~50B	~500B всего (~20B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#70 Claude Haiku 5.5

max

OpenRouter returned no showcase content (finish_reason: error).

Стоимость: $0.000
Время: 164.5s
Токены: 0 tok

#25 Gemini 3.7 Flash

low

Стоимость: $0.010
Время: 23.5s
Токены: 5,210 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	4.7	1.6	66.7%	1		93.30s	349,997	2,345	42,315
Gemini 3.7 Flash	10.0	10.0	100.0%	0		58.75s	98,197	1,400	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		5.52s	858	401	10,159
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.54s	492	99	1,398

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		55.87s	10,608	532	125,988
Gemini 3.7 Flash	7.6	7.2	77.8%	1		6.20s	8,118	461	11,508

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		148.38s	99,980	4,909	215,518
Gemini 3.7 Flash	10.0	10.0	100.0%	0		13.00s	66,250	4,873	8,108

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		11.11s	10,515	311	13,476
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.15s	7,548	278	1,093

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	5.3	10.0	33.3%	0		228.16s	990	18	426,269
Gemini 3.7 Flash	8.2	7.2	88.9%	1		3.09s	642	12	3,029

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		42.22s	714	250	26,083
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.76s	486	81	1,043

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		6.22s	921	99	5,965
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.47s	615	72	1,778

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		16.54s	912	716	29,419
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.92s	558	166	1,580

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		9.86s	11,757	355	3,989
Gemini 3.7 Flash	10.0	10.0	100.0%	0		4.10s	5,457	241	160

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	3.0	10.0	0.0%	0		18.80s	264	276	10,306
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.92s	156	11	1,062

Сменить пару сравнения