Claude Haiku 5.5 (low) vs KAT-Coder-Pro V2.5 (medium)

Claude Haiku 5.5 (low) лидирует по среднему баллу: 8.6 vs 6.2. Claude Haiku 5.5 (low) имеет более низкую стоимость benchmark: $0.061 vs $0.669. Claude Haiku 5.5 (low) быстрее: 7.51s vs 23.94s, с долей успешных попыток 76.8% vs 62.3%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-12

Сравниваемые модели

Ранг: #64
Общее число выходных токенов: 61,650
Время ответа (среднее): 7.51s
Общая стоимость: $0.061

Ранг: #240
Общее число выходных токенов: 139,375
Время ответа (среднее): 23.94s
Общая стоимость: $0.669

Рекомендуемая модель Claude Haiku 5.5 (low)

Здесь у него лучший балл (8.6), при этом он примерно в 11.1 раза дешевле, чем KAT-Coder-Pro V2.5 (medium).

Подробное сравнение

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Релиз: 2026-07-14

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Релиз: 2026-07-14
Оценка	8.6	6.2
Ранг	#64	#240
Надежность	10.0	10.0
Стабильность	8.9	7.2
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	76.8%	62.3%
Нестабильные тесты	3	8
Всего запусков	69	69
Стоимость за результат	0.378	4.342
Общая стоимость	$0.061	$0.669
Цена входа	$0.100 / 1M	$0.740 / 1M
Цена выхода	$0.500 / 1M	$2.960 / 1M
Цена чтения из кэша	$0.010 / 1M	$0.150 / 1M
Цена записи в кэш	$0.125 / 1M	Н/Д
Общее число входных токенов	296,301	87,916
Выходные токены	10,672	7,213
Токены рассуждений	50,978	132,162
Время ответа (среднее)	7.51s	23.94s
Время ответа (макс.)	44.43s	257.00s
Время ответа (суммарно)	172.74s	550.52s
Параметры	~50B	~700B всего (~72B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#64 Claude Haiku 5.5

low

Стоимость: $0.001
Время: 7.4s
Токены: 1,851 tok

#240 KAT-Coder-Pro V2.5

medium

Стоимость: $0.009
Время: 25.6s
Токены: 2,939 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		3.38s	0	0	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
KAT-Coder-Pro V2.5	8.2	7.9	83.3%	1		3.90s	672	208	3,868

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
KAT-Coder-Pro V2.5	7.8	10.0	66.7%	0		33.10s	7,893	416	33,658

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
KAT-Coder-Pro V2.5	6.4	5.8	66.7%	1		135.75s	60,289	5,478	51,591

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
KAT-Coder-Pro V2.5	7.3	5.9	83.3%	1		4.70s	7,776	275	2,122

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
KAT-Coder-Pro V2.5	2.9	4.4	22.2%	2		35.11s	780	36	33,495

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
KAT-Coder-Pro V2.5	4.7	3.1	33.3%	1		2.35s	516	92	381

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
KAT-Coder-Pro V2.5	9.9	10.0	100.0%	0		2.58s	699	83	971

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
KAT-Coder-Pro V2.5	5.9	4.5	66.7%	2		3.20s	696	325	1,867

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		19.02s	8,391	282	1,010

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		9.87s	204	18	3,199

Сменить пару сравнения