Claude Haiku 5.5 (xhigh) vs Gemini 4 Hydrogen (high)

Средний балл практически равен: 9.1 vs 9.1. Claude Haiku 5.5 (xhigh) имеет более низкую стоимость benchmark: $0.140 vs $2.019. Claude Haiku 5.5 (xhigh) быстрее: 16.58s vs 23.79s, с долей успешных попыток 81.2% vs 94.2%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-11-13

Сравниваемые модели

Ранг: #51
Общее число выходных токенов: 199,268
Время ответа (среднее): 16.58s
Общая стоимость: $0.140

Ранг: #54
Общее число выходных токенов: 212,638
Время ответа (среднее): 23.79s
Общая стоимость: $2.019

Рекомендуемая модель Claude Haiku 5.5 (xhigh)

Здесь у него лучший балл (9.1), при этом он примерно в 14.5 раза дешевле, чем Gemini 4 Hydrogen (high).

Подробное сравнение

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 xhigh Релиз: 2026-10-07	Gemini 4 Hydrogen Gemini 4 Hydrogen high Релиз: 2026-11-12

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 xhigh Релиз: 2026-10-07	Gemini 4 Hydrogen Gemini 4 Hydrogen high Релиз: 2026-11-12
Оценка	9.1	9.1
Ранг	#51	#54
Надежность	10.0	9.1
Стабильность	9.3	8.5
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	81.2%	94.2%
Нестабильные тесты	2	4
Всего запусков	69	69
Стоимость за результат	0.773	10.624
Общая стоимость	$0.140	$2.019
Цена входа	$0.100 / 1M	$1.500 / 1M
Цена выхода	$0.500 / 1M	$7.500 / 1M
Цена чтения из кэша	$0.010 / 1M	$0.075 / 1M
Цена записи в кэш	$0.125 / 1M	$0.084 / 1M
Общее число входных токенов	394,509	282,413
Выходные токены	10,349	6,186
Токены рассуждений	188,919	206,452
Время ответа (среднее)	16.58s	23.79s
Время ответа (макс.)	92.74s	98.19s
Время ответа (суммарно)	381.40s	547.07s
Параметры	~50B	~300B всего (~15B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#51 Claude Haiku 5.5

xhigh

Стоимость: $0.021
Время: 189.0s
Токены: 41,343 tok

#54 Gemini 4 Hydrogen

high

Стоимость: $0.101
Время: 85.4s
Токены: 13,562 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		62.72s	257,002	2,786	14,500
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		73.28s	168,210	1,106	15,190

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		2.88s	858	367	3,017
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		3.51s	918	204	2,880

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		13.13s	10,608	504	26,396
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		19.18s	8,448	492	22,526

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		38.95s	99,968	4,903	45,341
Gemini 4 Hydrogen	4.7	1.6	66.7%	2		68.35s	81,978	3,209	56,227

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.65s	10,515	312	2,656
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		4.99s	8,025	336	2,535

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	5.3	7.2	44.4%	1		47.83s	990	65	83,800
Gemini 4 Hydrogen	6.4	4.4	77.8%	2		69.17s	963	49	94,927

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	5.0	10.0	0.0%	0		9.80s	714	155	4,341
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		6.24s	591	128	1,580

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.34s	921	100	1,775
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		5.54s	825	96	3,059

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.6	7.2	77.8%	1		3.80s	912	563	4,066
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		3.19s	882	230	2,102

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		6.42s	11,757	354	1,285
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		13.26s	11,312	312	3,279

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	3.0	10.0	0.0%	0		4.79s	264	240	1,742
Gemini 4 Hydrogen	10.0	10.0	100.0%	0		7.88s	261	24	2,147

Сменить пару сравнения

Gemini 4 HydrogenhighvsMuse Wonderlow Claude Haiku 5.5xhighvsGPT-5.3-Codexmedium Gemini 4 HydrogenhighvsParetodefault Claude Haiku 5.5xhighvsMuse Spark 1.3high Claude Haiku 5.5xhighvsQwen3.8 Max (0902)high Claude Haiku 5.5xhighvsMuse Wonderlow Gemini 4 HydrogenhighvsMuse Wonderminimal Claude Fable 5.2mediumvsGemini 4 Hydrogenhigh Gemini 4 HydrogenhighvsGPT-5.3-Codexmedium Claude Haiku 5.5xhighvsParetodefault Claude Haiku 5.5xhighvsSeed 2.1 Turbohigh Gemini 4 HydrogenhighvsParticle-1low