Claude Sonnet 5.5 (medium) vs KAT-Coder-Pro V2.5 (high)

Claude Sonnet 5.5 (medium) лидирует по среднему баллу: 6.5 vs 6.5. KAT-Coder-Pro V2.5 (high) имеет более низкую стоимость benchmark: $0.506 vs $1.100. Claude Sonnet 5.5 (medium) быстрее: 8.03s vs 21.21s, с долей успешных попыток 40.6% vs 60.9%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-01

Сравниваемые модели

Ранг: #192
Общее число выходных токенов: 37,748
Время ответа (среднее): 8.03s
Общая стоимость: $1.100

Ранг: #198
Общее число выходных токенов: 144,359
Время ответа (среднее): 21.21s
Общая стоимость: $0.506

Рекомендуемая модель Claude Sonnet 5.5 (medium)

Здесь у него лучший балл (6.5), и он отвечает примерно в 2.6 раза быстрее, чем KAT-Coder-Pro V2.5 (high).

Подробное сравнение

Метрика	Claude Sonnet 5.5 Claude Sonnet 5.5 medium Релиз: 2026-09-29	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Релиз: 2026-07-14

Метрика	Claude Sonnet 5.5 Claude Sonnet 5.5 medium Релиз: 2026-09-29	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Релиз: 2026-07-14
Оценка	6.5	6.5
Ранг	#192	#198
Надежность	10.0	10.0
Стабильность	9.7	7.9
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	40.6%	60.9%
Нестабильные тесты	1	6
Всего запусков	69	69
Стоимость за результат	12.221	4.599
Общая стоимость	$1.100	$0.506
Цена входа	$2.000 / 1M	$0.740 / 1M
Цена выхода	$10.000 / 1M	$2.960 / 1M
Общее число входных токенов	361,183	106,085
Выходные токены	26,609	9,071
Токены рассуждений	11,139	135,288
Время ответа (среднее)	8.03s	21.21s
Время ответа (макс.)	51.18s	199.97s
Время ответа (суммарно)	184.80s	487.83s
Параметры	~1T всего (~100B активных)	~700B всего (~72B активных)
Доступность	Закрытая модель	Закрытая модель

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#192 Claude Sonnet 5.5

medium

Стоимость: $0.024
Время: 17.4s
Токены: 2,525 tok

#198 KAT-Coder-Pro V2.5

high

Стоимость: $0.009
Время: 26.4s
Токены: 3,117 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	10.0	10.0	100.0%	0		51.18s	190,412	3,424	1,344
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.52s	0	0	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	6.5	10.0	50.0%	0		2.54s	858	1,697	0
KAT-Coder-Pro V2.5	7.0	8.0	66.7%	1		3.17s	672	447	2,716

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	3.4	9.7	0.0%	0		6.07s	10,608	6,767	0
KAT-Coder-Pro V2.5	6.4	7.9	44.4%	1		22.00s	7,893	422	20,461

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	8.5	10.0	50.0%	0		23.58s	133,232	7,780	5,241
KAT-Coder-Pro V2.5	7.3	5.8	83.3%	1		106.70s	78,458	6,956	60,306

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	6.5	10.0	50.0%	0		2.56s	10,515	696	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		4.13s	7,776	278	1,960

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	3.0	10.0	0.0%	0		8.78s	990	4,137	2,729
KAT-Coder-Pro V2.5	2.9	4.4	22.2%	2		44.66s	780	33	43,896

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	5.1	3.4	33.3%	1		2.27s	714	324	0
KAT-Coder-Pro V2.5	5.1	10.0	0.0%	0		3.27s	516	139	647

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	6.3	10.0	50.0%	0		1.88s	921	346	0
KAT-Coder-Pro V2.5	9.9	10.0	100.0%	0		2.67s	699	84	976

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	7.7	10.0	66.7%	0		2.43s	912	876	0
KAT-Coder-Pro V2.5	8.2	7.2	88.9%	1		3.38s	696	428	1,936

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	10.0	10.0	100.0%	0		4.75s	11,757	354	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		28.04s	8,391	268	896

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	3.0	10.0	0.0%	0		8.57s	264	208	1,825
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		5.22s	204	16	1,494

Быстрое сравнение

Сменить пару сравнения