Claude Sonnet 5.5 (medium) vs KAT-Coder-Pro V2.5 (low)

Средний балл практически равен: 6.5 vs 6.5. KAT-Coder-Pro V2.5 (low) имеет более низкую стоимость benchmark: $0.400 vs $1.100. Claude Sonnet 5.5 (medium) быстрее: 8.03s vs 19.40s, с долей успешных попыток 40.6% vs 65.2%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-01

Сравниваемые модели

Ранг: #192
Общее число выходных токенов: 37,748
Время ответа (среднее): 8.03s
Общая стоимость: $1.100

Ранг: #191
Общее число выходных токенов: 113,193
Время ответа (среднее): 19.40s
Общая стоимость: $0.400

Рекомендуемая модель KAT-Coder-Pro V2.5 (low)

Здесь у него лучший балл (6.5), при этом он примерно в 2.8 раза дешевле, чем Claude Sonnet 5.5 (medium).

Подробное сравнение

Метрика	Claude Sonnet 5.5 Claude Sonnet 5.5 medium Релиз: 2026-09-29	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Релиз: 2026-07-14

Метрика	Claude Sonnet 5.5 Claude Sonnet 5.5 medium Релиз: 2026-09-29	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Релиз: 2026-07-14
Оценка	6.5	6.5
Ранг	#192	#191
Надежность	10.0	10.0
Стабильность	9.7	7.1
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	40.6%	65.2%
Нестабильные тесты	1	8
Всего запусков	69	69
Стоимость за результат	12.221	3.636
Общая стоимость	$1.100	$0.400
Цена входа	$2.000 / 1M	$0.740 / 1M
Цена выхода	$10.000 / 1M	$2.960 / 1M
Общее число входных токенов	361,183	87,682
Выходные токены	26,609	7,166
Токены рассуждений	11,139	106,027
Время ответа (среднее)	8.03s	19.40s
Время ответа (макс.)	51.18s	209.15s
Время ответа (суммарно)	184.80s	446.11s
Параметры	~1T всего (~100B активных)	~700B всего (~72B активных)
Доступность	Закрытая модель	Закрытая модель

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#192 Claude Sonnet 5.5

medium

Стоимость: $0.024
Время: 17.4s
Токены: 2,525 tok

#191 KAT-Coder-Pro V2.5

low

Стоимость: $0.016
Время: 47.6s
Токены: 5,182 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	10.0	10.0	100.0%	0		51.18s	190,412	3,424	1,344
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.75s	0	0	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	6.5	10.0	50.0%	0		2.54s	858	1,697	0
KAT-Coder-Pro V2.5	6.9	5.8	75.0%	2		4.20s	672	277	4,228

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	3.4	9.7	0.0%	0		6.07s	10,608	6,767	0
KAT-Coder-Pro V2.5	7.8	10.0	66.7%	0		24.87s	7,893	402	24,945

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	8.5	10.0	50.0%	0		23.58s	133,232	7,780	5,241
KAT-Coder-Pro V2.5	6.4	5.8	66.7%	1		111.87s	60,055	5,393	43,732

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	6.5	10.0	50.0%	0		2.56s	10,515	696	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		4.19s	7,776	288	1,917

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	3.0	10.0	0.0%	0		8.78s	990	4,137	2,729
KAT-Coder-Pro V2.5	3.5	4.4	33.3%	2		22.86s	780	35	21,430

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	5.1	3.4	33.3%	1		2.27s	714	324	0
KAT-Coder-Pro V2.5	4.1	2.7	33.3%	1		2.32s	516	99	412

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	6.3	10.0	50.0%	0		1.88s	921	346	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		2.53s	699	83	1,008

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	7.7	10.0	66.7%	0		2.43s	912	876	0
KAT-Coder-Pro V2.5	6.4	4.4	77.8%	2		3.11s	696	289	1,820

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	10.0	10.0	100.0%	0		4.75s	11,757	354	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		18.45s	8,391	282	834

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5.5	3.0	10.0	0.0%	0		8.57s	264	208	1,825
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		17.06s	204	18	5,701

Быстрое сравнение

Сменить пару сравнения

KAT-Coder-Pro V2.5lowvsStep 3.7 Flashhigh Claude Sonnet 5.5mediumvsMercury 2.5 Previewhigh Mercury 2mediumvsKAT-Coder-Pro V2.5low Claude Sonnet 5.5mediumvsMercury 2.5high Claude Sonnet 5.5mediumvsGLM 5.3low KAT-Coder-Pro V2.5lowvsQwen3.6 35B A3Bmedium Claude Sonnet 5.5mediumvsGLM 5.1none Claude Sonnet 5.5mediumvsStep 3.7 Flashhigh Mercury 2.5 PreviewhighvsKAT-Coder-Pro V2.5low KAT-Coder-Pro V2.5lowvsQwen3.7 Flashmedium Claude Sonnet 5.5mediumvsKAT-Coder-Pro V2.5high Mercury 2.5highvsKAT-Coder-Pro V2.5low