KAT-Coder-Pro V2.5 (low) vs Beam 1.0 501B A23B (medium)

Средний балл практически равен: 6.5 vs 6.6. Beam 1.0 501B A23B (medium) имеет более низкую стоимость benchmark: $0.499 vs $0.568. Beam 1.0 501B A23B (medium) быстрее: 6.27s vs 19.40s, с долей успешных попыток 65.2% vs 65.2%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-17

Сравниваемые модели

Ранг: #221
Общее число выходных токенов: 113,193
Время ответа (среднее): 19.40s
Общая стоимость: $0.568

Ранг: #220
Общее число выходных токенов: 98,521
Время ответа (среднее): 6.27s
Общая стоимость: $0.499

Рекомендуемая модель Beam 1.0 501B A23B (medium)

Здесь у него лучший балл (6.6), и он отвечает примерно в 3.1 раза быстрее, чем KAT-Coder-Pro V2.5 (low).

Подробное сравнение

Метрика	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Релиз: 2026-07-14	Beam 1.0 501B A23B Beam 1.0 501B A23B medium Релиз: 2026-10-17

Метрика	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Релиз: 2026-07-14	Beam 1.0 501B A23B Beam 1.0 501B A23B medium Релиз: 2026-10-17
Оценка	6.5	6.6
Ранг	#221	#220
Надежность	10.0	10.0
Стабильность	7.1	9.3
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	65.2%	65.2%
Нестабильные тесты	8	2
Всего запусков	69	69
Стоимость за результат	3.636	3.561
Общая стоимость	$0.568	$0.499
Цена входа	$0.740 / 1M	$1.000 / 1M
Цена выхода	$2.960 / 1M	$3.000 / 1M
Цена чтения из кэша	$0.150 / 1M	$0.100 / 1M
Цена записи в кэш	Н/Д	Н/Д
Общее число входных токенов	87,682	202,937
Выходные токены	7,166	4,328
Токены рассуждений	106,027	94,193
Время ответа (среднее)	19.40s	6.27s
Время ответа (макс.)	209.15s	31.55s
Время ответа (суммарно)	446.11s	144.28s
Параметры	~700B всего (~72B активных)	501B всего (23B активных)
Доступность	Закрытая модель	Открытый исходный код

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#221 KAT-Coder-Pro V2.5

low

Стоимость: $0.016
Время: 47.6s
Токены: 5,182 tok

#220 Beam 1.0 501B A23B

medium

Стоимость: $0.005
Время: 11.8s
Токены: 4,267 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.75s	0	0	0
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		31.55s	172,837	2,588	9,026

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	6.9	5.8	75.0%	2		4.20s	672	277	4,228
Beam 1.0 501B A23B	10.0	10.0	100.0%	0		1.62s	1,113	232	4,706

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	7.8	10.0	66.7%	0		24.87s	7,893	402	24,945
Beam 1.0 501B A23B	10.0	10.0	100.0%	0		11.81s	7,791	440	27,204

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	6.4	5.8	66.7%	1		111.87s	60,055	5,393	43,732
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		2.62s	7,665	132	2,087

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		4.19s	7,776	288	1,917
Beam 1.0 501B A23B	10.0	10.0	100.0%	0		1.24s	7,993	279	1,614

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	3.5	4.4	33.3%	2		22.86s	780	35	21,430
Beam 1.0 501B A23B	2.9	7.2	11.1%	1		11.66s	1,113	71	29,077

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	4.1	2.7	33.3%	1		2.32s	516	99	412
Beam 1.0 501B A23B	4.7	1.6	66.7%	1		1.87s	615	96	1,532

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		2.53s	699	83	1,008
Beam 1.0 501B A23B	9.8	10.0	100.0%	0		1.24s	918	102	1,834

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	6.4	4.4	77.8%	2		3.11s	696	289	1,820
Beam 1.0 501B A23B	10.0	10.0	100.0%	0		3.91s	1,029	281	9,130

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		18.45s	8,391	282	834
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		1.95s	1,530	72	440

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		17.06s	204	18	5,701
Beam 1.0 501B A23B	3.0	10.0	0.0%	0		10.13s	333	35	7,543

Сменить пару сравнения