KAT-Coder-Pro V2.5 (low) vs GPT-6 Luna (medium)

GPT-6 Luna (medium) лидирует по среднему баллу: 8.3 vs 6.5. GPT-6 Luna (medium) имеет более низкую стоимость benchmark: $0.047 vs $0.568. GPT-6 Luna (medium) быстрее: 18.07s vs 19.40s, с долей успешных попыток 65.2% vs 73.9%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-12

Сравниваемые модели

Ранг: #204
Общее число выходных токенов: 113,193
Время ответа (среднее): 19.40s
Общая стоимость: $0.568

Ранг: #83
Общее число выходных токенов: 53,161
Время ответа (среднее): 18.07s
Общая стоимость: $0.047

Рекомендуемая модель GPT-6 Luna (medium)

Здесь у него лучший балл (8.3), при этом он примерно в 12.1 раза дешевле, чем KAT-Coder-Pro V2.5 (low).

Подробное сравнение

Метрика	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Релиз: 2026-07-14	GPT-6 Luna GPT-6 Luna medium Релиз: 2026-09-23

Метрика	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Релиз: 2026-07-14	GPT-6 Luna GPT-6 Luna medium Релиз: 2026-09-23
Оценка	6.5	8.3
Ранг	#204	#83
Надежность	10.0	10.0
Стабильность	7.1	8.9
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	65.2%	73.9%
Нестабильные тесты	8	3
Всего запусков	69	69
Стоимость за результат	3.636	0.313
Общая стоимость	$0.568	$0.047
Цена входа	$0.740 / 1M	$0.100 / 1M
Цена выхода	$2.960 / 1M	$0.500 / 1M
Цена чтения из кэша	$0.150 / 1M	$0.010 / 1M
Цена записи в кэш	Н/Д	$0.125 / 1M
Общее число входных токенов	87,682	203,193
Выходные токены	7,166	5,751
Токены рассуждений	106,027	47,410
Время ответа (среднее)	19.40s	18.07s
Время ответа (макс.)	209.15s	66.44s
Время ответа (суммарно)	446.11s	415.53s
Параметры	~700B всего (~72B активных)	~400B всего (~17B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#204 KAT-Coder-Pro V2.5

low

Стоимость: $0.016
Время: 47.6s
Токены: 5,182 tok

#83 GPT-6 Luna

medium

Стоимость: $0.002
Время: 23.6s
Токены: 2,966 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.75s	0	0	0
GPT-6 Luna	10.0	10.0	100.0%	0		66.44s	124,247	1,116	6,891

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	6.9	5.8	75.0%	2		4.20s	672	277	4,228
GPT-6 Luna	8.3	10.0	75.0%	0		4.32s	606	156	875

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	7.8	10.0	66.7%	0		24.87s	7,893	402	24,945
GPT-6 Luna	6.6	4.6	77.8%	2		23.63s	7,302	438	10,222

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	6.4	5.8	66.7%	1		111.87s	60,055	5,393	43,732
GPT-6 Luna	10.0	10.0	100.0%	0		22.65s	55,738	3,052	4,096

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		4.19s	7,776	288	1,917
GPT-6 Luna	10.0	10.0	100.0%	0		26.09s	7,140	234	268

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	3.5	4.4	33.3%	2		22.86s	780	35	21,430
GPT-6 Luna	5.9	7.2	55.6%	1		22.71s	732	70	19,191

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	4.1	2.7	33.3%	1		2.32s	516	99	412
GPT-6 Luna	4.4	9.9	0.0%	0		28.25s	477	91	289

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		2.53s	699	83	1,008
GPT-6 Luna	9.8	10.0	100.0%	0		13.24s	660	89	409

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	6.4	4.4	77.8%	2		3.11s	696	289	1,820
GPT-6 Luna	7.7	10.0	66.7%	0		9.78s	642	211	3,189

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		18.45s	8,391	282	834
GPT-6 Luna	10.0	10.0	100.0%	0		4.84s	5,454	264	249

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		17.06s	204	18	5,701
GPT-6 Luna	3.0	10.0	0.0%	0		6.39s	195	30	1,731

Сменить пару сравнения

KAT-Coder-Pro V2.5lowvsStep 3.7 Flashhigh Mercury 2mediumvsKAT-Coder-Pro V2.5low GPT-6 LunamediumvsGrok 4.5high Claude Sonnet 5.5mediumvsKAT-Coder-Pro V2.5low Kimi K3maxvsGPT-6 Lunamedium KAT-Coder-Pro V2.5lowvsQwen3.6 35B A3Bmedium Gemini 3.5 FlashhighvsGPT-6 Lunamedium Claude Haiku 5.5highvsGPT-6 Lunamedium Mercury 2.5 PreviewhighvsKAT-Coder-Pro V2.5low KAT-Coder-Pro V2.5lowvsQwen3.7 Flashmedium Mercury 2.5highvsKAT-Coder-Pro V2.5low KAT-Coder-Pro V2.5lowvsGLM 5.2none