Claude Haiku 5.5 (low) vs Beam 1.0 501B A23B (xhigh)

Claude Haiku 5.5 (low) лидирует по среднему баллу: 8.6 vs 6.5. Claude Haiku 5.5 (low) имеет более низкую стоимость benchmark: $0.061 vs $0.688. Claude Haiku 5.5 (low) быстрее: 7.51s vs 9.18s, с долей успешных попыток 76.8% vs 63.8%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-17

Сравниваемые модели

Ранг: #74
Общее число выходных токенов: 61,650
Время ответа (среднее): 7.51s
Общая стоимость: $0.061

Ранг: #226
Общее число выходных токенов: 158,497
Время ответа (среднее): 9.18s
Общая стоимость: $0.688

Рекомендуемая модель Claude Haiku 5.5 (low)

Здесь у него лучший балл (8.6), при этом он примерно в 11.4 раза дешевле, чем Beam 1.0 501B A23B (xhigh).

Подробное сравнение

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	Beam 1.0 501B A23B Beam 1.0 501B A23B xhigh Релиз: 2026-10-17

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	Beam 1.0 501B A23B Beam 1.0 501B A23B xhigh Релиз: 2026-10-17
Оценка	8.6	6.5
Ранг	#74	#226
Надежность	10.0	10.0
Стабильность	8.9	8.3
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	76.8%	63.8%
Нестабильные тесты	3	5
Всего запусков	69	69
Стоимость за результат	0.378	5.730
Общая стоимость	$0.061	$0.688
Цена входа	$0.100 / 1M	$1.000 / 1M
Цена выхода	$0.500 / 1M	$3.000 / 1M
Цена чтения из кэша	$0.010 / 1M	$0.100 / 1M
Цена записи в кэш	$0.125 / 1M	Н/Д
Общее число входных токенов	296,301	212,065
Выходные токены	10,672	4,428
Токены рассуждений	50,978	154,069
Время ответа (среднее)	7.51s	9.18s
Время ответа (макс.)	44.43s	44.64s
Время ответа (суммарно)	172.74s	211.12s
Параметры	~50B	501B всего (23B активных)
Доступность	Закрытая модель	Открытый исходный код

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#74 Claude Haiku 5.5

low

Стоимость: $0.001
Время: 7.4s
Токены: 1,851 tok

#226 Beam 1.0 501B A23B

xhigh

Стоимость: $0.009
Время: 16.5s
Токены: 6,827 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		44.64s	181,898	2,416	18,550

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
Beam 1.0 501B A23B	9.2	8.4	91.7%	1		1.52s	1,125	355	3,764

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
Beam 1.0 501B A23B	10.0	10.0	100.0%	0		20.68s	7,801	585	46,192

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		2.68s	7,671	132	2,097

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
Beam 1.0 501B A23B	10.0	10.0	100.0%	0		1.60s	7,998	271	2,047

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
Beam 1.0 501B A23B	5.9	7.2	55.6%	1		20.22s	1,122	72	59,707

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
Beam 1.0 501B A23B	5.1	3.4	33.3%	1		2.50s	618	87	2,749

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
Beam 1.0 501B A23B	9.8	10.0	100.0%	0		1.15s	925	90	1,631

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
Beam 1.0 501B A23B	5.8	4.4	66.7%	2		4.46s	1,038	309	9,948

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		1.84s	1,533	72	465

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		9.10s	336	39	6,919

Сменить пару сравнения