Claude Haiku 5.5 (low) vs Gemini 3.8 Flash (medium)

Claude Haiku 5.5 (low) лидирует по среднему баллу: 8.6 vs 8.0. Claude Haiku 5.5 (low) имеет более низкую стоимость benchmark: $0.061 vs $0.769. Claude Haiku 5.5 (low) быстрее: 7.51s vs 16.64s, с долей успешных попыток 76.8% vs 89.9%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-17

Сравниваемые модели

Ранг: #74
Общее число выходных токенов: 61,650
Время ответа (среднее): 7.51s
Общая стоимость: $0.061

Ранг: #111
Общее число выходных токенов: 167,486
Время ответа (среднее): 16.64s
Общая стоимость: $0.769

Рекомендуемая модель Claude Haiku 5.5 (low)

Здесь у него лучший балл (8.6), при этом он примерно в 12.7 раза дешевле, чем Gemini 3.8 Flash (medium).

Подробное сравнение

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	Gemini 3.8 Flash Gemini 3.8 Flash medium Релиз: 2026-09-02

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	Gemini 3.8 Flash Gemini 3.8 Flash medium Релиз: 2026-09-02
Оценка	8.6	8.0
Ранг	#74	#111
Надежность	10.0	9.9
Стабильность	8.9	9.0
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	76.8%	89.9%
Нестабильные тесты	3	3
Всего запусков	69	69
Стоимость за результат	0.378	4.046
Общая стоимость	$0.061	$0.769
Цена входа	$0.100 / 1M	$0.750 / 1M
Цена выхода	$0.500 / 1M	$3.750 / 1M
Цена чтения из кэша	$0.010 / 1M	$0.075 / 1M
Цена записи в кэш	$0.125 / 1M	$0.042 / 1M
Общее число входных токенов	296,301	187,331
Выходные токены	10,672	7,555
Токены рассуждений	50,978	159,931
Время ответа (среднее)	7.51s	16.64s
Время ответа (макс.)	44.43s	108.60s
Время ответа (суммарно)	172.74s	382.64s
Параметры	~50B	~500B всего (~20B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#74 Claude Haiku 5.5

low

Стоимость: $0.001
Время: 7.4s
Токены: 1,851 tok

#111 Gemini 3.8 Flash

medium

Стоимость: $0.037
Время: 54.6s
Токены: 9,712 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
Gemini 3.8 Flash	2.8	1.6	33.3%	1		63.72s	91,538	489	12,089

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
Gemini 3.8 Flash	10.0	10.0	100.0%	0		2.66s	492	145	3,131

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
Gemini 3.8 Flash	8.0	9.9	66.7%	0		11.69s	8,118	454	19,433

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
Gemini 3.8 Flash	8.7	6.9	83.3%	1		60.28s	71,646	5,615	59,676

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
Gemini 3.8 Flash	10.0	10.0	100.0%	0		5.74s	7,548	279	4,386

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
Gemini 3.8 Flash	8.2	7.2	88.9%	1		31.77s	644	12	44,973

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
Gemini 3.8 Flash	10.0	10.0	100.0%	0		3.65s	486	78	1,185

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
Gemini 3.8 Flash	10.0	10.0	100.0%	0		4.81s	615	72	2,944

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
Gemini 3.8 Flash	10.0	10.0	100.0%	0		2.73s	558	151	2,720

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
Gemini 3.8 Flash	10.0	10.0	100.0%	0		18.47s	5,530	249	6,512

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
Gemini 3.8 Flash	10.0	10.0	100.0%	0		5.94s	156	11	2,882

Сменить пару сравнения

Gemini 3.8 FlashmediumvsQwen3.8 Flash Nextlow Gemini 3.8 FlashmediumvsGPT-5.6 Terralow Gemini 3.8 FlashmediumvsGPT-5.6 Lunahigh Claude Haiku 5.5lowvsGrok 4.6high Gemini 3.8 FlashmediumvsGLM 5.3 FlashXmax Claude Fable 5.1highvsGemini 3.8 Flashmedium Claude Haiku 5.5lowvsDeepSeek V4.1 Flashmax Claude Haiku 5.5lowvsQwen3.7 Maxmedium Gemini 3.8 FlashmediumvsQwen3.7 Maxnone DeepSeek V4.1 FlashlowvsGemini 3.8 Flashmedium Claude Haiku 5.5lowvsSeed 2.1 Turbomedium Claude Haiku 5.5lowvsMiMo-V2.6-Promedium