Claude Haiku 5.5 (low) vs KAT Coder AIR V2.5 (high)

Claude Haiku 5.5 (low) лидирует по среднему баллу: 8.6 vs 5.2. Claude Haiku 5.5 (low) имеет более низкую стоимость benchmark: $0.061 vs $0.077. Claude Haiku 5.5 (low) быстрее: 7.51s vs 15.23s, с долей успешных попыток 76.8% vs 40.6%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-12

Сравниваемые модели

Ранг: #64
Общее число выходных токенов: 61,650
Время ответа (среднее): 7.51s
Общая стоимость: $0.061

Ранг: #309
Общее число выходных токенов: 114,654
Время ответа (среднее): 15.23s
Общая стоимость: $0.077

Рекомендуемая модель Claude Haiku 5.5 (low)

Здесь у него лучший балл (8.6), и он отвечает примерно в 2.0 раза быстрее, чем KAT Coder AIR V2.5 (high).

Подробное сравнение

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	KAT Coder AIR V2.5 KAT Coder AIR V2.5 high Релиз: 2026-07-14

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 low Релиз: 2026-10-07	KAT Coder AIR V2.5 KAT Coder AIR V2.5 high Релиз: 2026-07-14
Оценка	8.6	5.2
Ранг	#64	#309
Надежность	10.0	9.8
Стабильность	8.9	8.2
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	76.8%	40.6%
Нестабильные тесты	3	5
Всего запусков	69	69
Стоимость за результат	0.378	1.091
Общая стоимость	$0.061	$0.077
Цена входа	$0.100 / 1M	$0.150 / 1M
Цена выхода	$0.500 / 1M	$0.600 / 1M
Цена чтения из кэша	$0.010 / 1M	Н/Д
Цена записи в кэш	$0.125 / 1M	Н/Д
Общее число входных токенов	296,301	50,423
Выходные токены	10,672	4,144
Токены рассуждений	50,978	110,510
Время ответа (среднее)	7.51s	15.23s
Время ответа (макс.)	44.43s	118.35s
Время ответа (суммарно)	172.74s	350.26s
Параметры	~50B	~35B всего (~3B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#64 Claude Haiku 5.5

low

Стоимость: $0.001
Время: 7.4s
Токены: 1,851 tok

#309 KAT Coder AIR V2.5

high

Reached the allocated time limit (300 seconds) without receiving showcase output.

Стоимость: $0.000
Время: 300.0s
Токены: 0 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		44.43s	153,966	2,991	3,811
KAT Coder AIR V2.5	3.0	10.0	0.0%	0		1.10s	0	0	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	8.7	7.9	91.7%	1		2.16s	858	483	1,480
KAT Coder AIR V2.5	6.9	5.8	75.0%	2		2.49s	615	204	1,290

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.9	7.5	77.8%	1		7.30s	10,608	531	11,618
KAT Coder AIR V2.5	4.3	7.3	11.1%	1		39.07s	6,948	1,166	55,883

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		23.94s	104,796	4,741	19,543
KAT Coder AIR V2.5	6.5	10.0	50.0%	0		74.48s	23,854	485	28,559

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		3.45s	10,515	312	1,609
KAT Coder AIR V2.5	6.5	10.0	50.0%	0		3.59s	7,776	284	2,140

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	5.9	7.2	55.6%	1		7.35s	990	64	9,207
KAT Coder AIR V2.5	3.0	10.0	0.0%	0		7.28s	724	1,101	7,738

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	4.6	9.8	0.0%	0		1.38s	714	319	0
KAT Coder AIR V2.5	5.1	10.0	0.0%	0		7.10s	516	179	539

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	9.8	10.0	100.0%	0		2.20s	921	94	515
KAT Coder AIR V2.5	9.8	10.0	100.0%	0		1.51s	699	90	675

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	7.7	10.0	66.7%	0		2.76s	912	611	1,783
KAT Coder AIR V2.5	3.5	4.4	33.3%	2		2.47s	696	285	1,576

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		4.19s	11,757	354	459
KAT Coder AIR V2.5	10.0	10.0	100.0%	0		4.77s	8,391	330	1,082

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	3.0	10.0	0.0%	0		2.70s	264	172	953
KAT Coder AIR V2.5	3.0	10.0	0.0%	0		21.72s	204	20	11,028

Сменить пару сравнения

Ling 3.0 FlashnonevsKAT Coder AIR V2.5high Claude Haiku 5.5lowvsGrok 4.6high KAT Coder AIR V2.5highvsInkling SmalllowБесплатно доступно KAT Coder AIR V2.5highvsMistral Small 4medium KAT Coder AIR V2.5highvsMistral Small 4none Claude Haiku 5.5lowvsDeepSeek V4.1 Flashmax Claude Haiku 5.5lowvsQwen3.7 Maxmedium Mercury 2.5lowvsKAT Coder AIR V2.5high KAT Coder AIR V2.5highvsMiMo-V2.5-Pronone Claude Haiku 5.5lowvsSeed 2.1 Turbomedium Claude Haiku 5.5lowvsMiMo-V2.6-Promedium KAT Coder AIR V2.5highvsQwen3.6 35B A3Bnone