KAT-Coder-Pro V2.5 (low) vs Step 3.7 Flash (high)

Средний балл практически равен: 6.5 vs 6.6. KAT-Coder-Pro V2.5 (low) имеет более низкую стоимость benchmark: $0.400 vs $1.350. KAT-Coder-Pro V2.5 (low) быстрее: 19.40s vs 72.72s, с долей успешных попыток 65.2% vs 58.0%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-01

Сравниваемые модели

Ранг: #191
Общее число выходных токенов: 113,193
Время ответа (среднее): 19.40s
Общая стоимость: $0.400

Ранг: #190
Общее число выходных токенов: 1,100,052
Время ответа (среднее): 72.72s
Общая стоимость: $1.350

Рекомендуемая модель KAT-Coder-Pro V2.5 (low)

Здесь у него лучший балл (6.5), при этом он примерно в 3.4 раза дешевле, чем Step 3.7 Flash (high).

Подробное сравнение

Метрика	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Релиз: 2026-07-14	Step 3.7 Flash Step 3.7 Flash high Релиз: 2026-05-29

Метрика	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Релиз: 2026-07-14	Step 3.7 Flash Step 3.7 Flash high Релиз: 2026-05-29
Оценка	6.5	6.6
Ранг	#191	#190
Надежность	10.0	10.0
Стабильность	7.1	8.5
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	65.2%	58.0%
Нестабильные тесты	8	4
Всего запусков	69	69
Стоимость за результат	3.636	12.267
Общая стоимость	$0.400	$1.350
Цена входа	$0.740 / 1M	$0.200 / 1M
Цена выхода	$2.960 / 1M	$1.150 / 1M
Общее число входных токенов	87,682	421,200
Выходные токены	7,166	1,100,052
Токены рассуждений	106,027	0
Время ответа (среднее)	19.40s	72.72s
Время ответа (макс.)	209.15s	364.99s
Время ответа (суммарно)	446.11s	1672.53s
Параметры	~700B всего (~72B активных)	198B всего (11B активных)
Доступность	Закрытая модель	Открытый исходный код

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#191 KAT-Coder-Pro V2.5

low

Стоимость: $0.016
Время: 47.6s
Токены: 5,182 tok

#190 Step 3.7 Flash

high

Стоимость: $0.007
Время: 63.6s
Токены: 6,030 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.75s	0	0	0
Step 3.7 Flash	5.4	9.6	0.0%	0		130.38s	322,500	49,152	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	6.9	5.8	75.0%	2		4.20s	672	277	4,228
Step 3.7 Flash	10.0	10.0	100.0%	0		13.40s	696	42,656	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	7.8	10.0	66.7%	0		24.87s	7,893	402	24,945
Step 3.7 Flash	4.0	6.0	22.2%	1		206.21s	6,057	327,340	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	6.4	5.8	66.7%	1		111.87s	60,055	5,393	43,732
Step 3.7 Flash	8.7	6.9	83.3%	1		41.23s	73,938	49,842	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		4.19s	7,776	288	1,917
Step 3.7 Flash	10.0	10.0	100.0%	0		14.72s	7,368	23,113	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	3.5	4.4	33.3%	2		22.86s	780	35	21,430
Step 3.7 Flash	3.6	7.2	22.2%	1		189.35s	792	429,007	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	4.1	2.7	33.3%	1		2.32s	516	99	412
Step 3.7 Flash	5.5	10.0	0.0%	0		4.17s	510	2,862	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		2.53s	699	83	1,008
Step 3.7 Flash	9.8	10.0	100.0%	0		1.52s	705	2,010	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	6.4	4.4	77.8%	2		3.11s	696	289	1,820
Step 3.7 Flash	5.3	7.2	44.4%	1		10.22s	711	25,422	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		18.45s	8,391	282	834
Step 3.7 Flash	10.0	10.0	100.0%	0		2.79s	7,701	1,172	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		17.06s	204	18	5,701
Step 3.7 Flash	3.0	10.0	0.0%	0		149.34s	222	147,476	0

Быстрое сравнение

Сменить пару сравнения

Mercury 2mediumvsStep 3.7 Flashhigh Mercury 2mediumvsKAT-Coder-Pro V2.5low LongCat 2.0lowvsStep 3.7 Flashhigh Claude Sonnet 5.5mediumvsKAT-Coder-Pro V2.5low Qwen3.7 FlashmediumvsStep 3.7 Flashhigh KAT-Coder-Pro V2.5lowvsQwen3.6 35B A3Bmedium Claude Sonnet 5.5mediumvsStep 3.7 Flashhigh Mercury 2.5 PreviewhighvsKAT-Coder-Pro V2.5low KAT-Coder-Pro V2.5lowvsQwen3.7 Flashmedium Qwen3.6 35B A3BmediumvsStep 3.7 Flashhigh Step 3.7 FlashhighvsGLM 5.2none Mercury 2.5highvsKAT-Coder-Pro V2.5low