Claude Haiku 5.5 (low) vs Ember-1

Claude Haiku 5.5 (low) лидирует по среднему баллу: 8.6 vs 5.4. Claude Haiku 5.5 (low) имеет более низкую стоимость benchmark: $0.061 vs $0.786. Claude Haiku 5.5 (low) быстрее: 7.51s vs 22.65s, с долей успешных попыток 76.8% vs 43.5%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-19

Сравниваемые модели

Ранг: #75
Общее число выходных токенов: 61,650
Время ответа (среднее): 7.51s
Общая стоимость: $0.061

Ранг: #329
Общее число выходных токенов: 11,832
Время ответа (среднее): 22.65s
Общая стоимость: $0.786

Рекомендуемая модель Claude Haiku 5.5 (low)

Здесь у него лучший балл (8.6), при этом он примерно в 13.0 раза дешевле, чем Ember-1.

Подробное сравнение

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	Ember-1 Ember-1 none Релиз: 2026-09-28

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	Ember-1 Ember-1 none Релиз: 2026-09-28
Оценка	8.6	5.4
Ранг	#75	#329
Надежность	10.0	8.8
Стабильность	8.9	8.6
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	76.8%	43.5%
Нестабильные тесты	3	4
Всего запусков	69	69
Стоимость за результат	0.378	9.817
Общая стоимость	$0.061	$0.786
Цена входа	$0.100 / 1M	$3.000 / 1M
Цена выхода	$0.500 / 1M	$15.000 / 1M
Цена чтения из кэша	$0.010 / 1M	$0.300 / 1M
Цена записи в кэш	$0.125 / 1M	Н/Д
Общее число входных токенов	296,301	202,617
Выходные токены	10,672	11,832
Токены рассуждений	50,978	0
Время ответа (среднее)	7.51s	22.65s
Время ответа (макс.)	44.43s	93.12s
Время ответа (суммарно)	172.74s	520.91s
Параметры	~50B	~2.8T всего (~104B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#75 Claude Haiku 5.5

low

Стоимость: $0.001
Время: 7.4s
Токены: 1,851 tok

#329 Ember-1

none

Стоимость: $0.156
Время: 224.6s
Токены: 10,555 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
Ember-1	6.1	3.1	66.7%	1		92.87s	175,191	9,168	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
Ember-1	5.2	7.9	41.7%	1		22.37s	796	867	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
Ember-1	5.5	10.0	33.3%	0		1.94s	7,485	393	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
Ember-1	3.0	10.0	0.0%	0		49.01s	12,162	327	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
Ember-1	6.4	5.9	66.7%	1		35.25s	4,017	161	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
Ember-1	5.3	10.0	33.3%	0		21.61s	804	68	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
Ember-1	5.0	10.0	0.0%	0		2.28s	540	160	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
Ember-1	6.4	5.8	66.7%	1		31.00s	509	81	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
Ember-1	10.0	10.0	100.0%	0		2.54s	840	569	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
Ember-1	3.0	10.0	0.0%	0		26.44s	0	0	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
Ember-1	3.0	10.0	0.0%	0		1.05s	273	38	0

Сменить пару сравнения