KAT-Coder-Pro V2.5 (medium) vs GPT-6 Luna (medium)

GPT-6 Luna (medium) лидирует по среднему баллу: 8.3 vs 6.2. GPT-6 Luna (medium) имеет более низкую стоимость benchmark: $0.047 vs $0.669. GPT-6 Luna (medium) быстрее: 18.07s vs 23.94s, с долей успешных попыток 62.3% vs 73.9%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-12

Сравниваемые модели

Ранг: #240
Общее число выходных токенов: 139,375
Время ответа (среднее): 23.94s
Общая стоимость: $0.669

Ранг: #83
Общее число выходных токенов: 53,161
Время ответа (среднее): 18.07s
Общая стоимость: $0.047

Рекомендуемая модель GPT-6 Luna (medium)

Здесь у него лучший балл (8.3), при этом он примерно в 14.3 раза дешевле, чем KAT-Coder-Pro V2.5 (medium).

Подробное сравнение

Метрика	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Релиз: 2026-07-14	GPT-6 Luna GPT-6 Luna medium Релиз: 2026-09-23

Метрика	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Релиз: 2026-07-14	GPT-6 Luna GPT-6 Luna medium Релиз: 2026-09-23
Оценка	6.2	8.3
Ранг	#240	#83
Надежность	10.0	10.0
Стабильность	7.2	8.9
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	62.3%	73.9%
Нестабильные тесты	8	3
Всего запусков	69	69
Стоимость за результат	4.342	0.313
Общая стоимость	$0.669	$0.047
Цена входа	$0.740 / 1M	$0.100 / 1M
Цена выхода	$2.960 / 1M	$0.500 / 1M
Цена чтения из кэша	$0.150 / 1M	$0.010 / 1M
Цена записи в кэш	Н/Д	$0.125 / 1M
Общее число входных токенов	87,916	203,193
Выходные токены	7,213	5,751
Токены рассуждений	132,162	47,410
Время ответа (среднее)	23.94s	18.07s
Время ответа (макс.)	257.00s	66.44s
Время ответа (суммарно)	550.52s	415.53s
Параметры	~700B всего (~72B активных)	~400B всего (~17B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#240 KAT-Coder-Pro V2.5

medium

Стоимость: $0.009
Время: 25.6s
Токены: 2,939 tok

#83 GPT-6 Luna

medium

Стоимость: $0.002
Время: 23.6s
Токены: 2,966 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		3.38s	0	0	0
GPT-6 Luna	10.0	10.0	100.0%	0		66.44s	124,247	1,116	6,891

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	8.2	7.9	83.3%	1		3.90s	672	208	3,868
GPT-6 Luna	8.3	10.0	75.0%	0		4.32s	606	156	875

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	7.8	10.0	66.7%	0		33.10s	7,893	416	33,658
GPT-6 Luna	6.6	4.6	77.8%	2		23.63s	7,302	438	10,222

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	6.4	5.8	66.7%	1		135.75s	60,289	5,478	51,591
GPT-6 Luna	10.0	10.0	100.0%	0		22.65s	55,738	3,052	4,096

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	7.3	5.9	83.3%	1		4.70s	7,776	275	2,122
GPT-6 Luna	10.0	10.0	100.0%	0		26.09s	7,140	234	268

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	2.9	4.4	22.2%	2		35.11s	780	36	33,495
GPT-6 Luna	5.9	7.2	55.6%	1		22.71s	732	70	19,191

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	4.7	3.1	33.3%	1		2.35s	516	92	381
GPT-6 Luna	4.4	9.9	0.0%	0		28.25s	477	91	289

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	9.9	10.0	100.0%	0		2.58s	699	83	971
GPT-6 Luna	9.8	10.0	100.0%	0		13.24s	660	89	409

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	5.9	4.5	66.7%	2		3.20s	696	325	1,867
GPT-6 Luna	7.7	10.0	66.7%	0		9.78s	642	211	3,189

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		19.02s	8,391	282	1,010
GPT-6 Luna	10.0	10.0	100.0%	0		4.84s	5,454	264	249

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		9.87s	204	18	3,199
GPT-6 Luna	3.0	10.0	0.0%	0		6.39s	195	30	1,731

Сменить пару сравнения

KAT-Coder-Pro V2.5mediumvsSpace Bunny Alphaxhigh DeepSeek V4 Flash 0731nonevsKAT-Coder-Pro V2.5medium GPT-6 LunamediumvsGrok 4.5high Gemini 3.1 Flash Lite PreviewnonevsKAT-Coder-Pro V2.5medium Kimi K3maxvsGPT-6 Lunamedium Gemini 3.5 FlashhighvsGPT-6 Lunamedium DeepSeek V4 Flash 0423nonevsKAT-Coder-Pro V2.5medium Claude Fable 5.1lowvsKAT-Coder-Pro V2.5medium Claude Haiku 5.5highvsGPT-6 Lunamedium Trinity Large ThinkinglowvsKAT-Coder-Pro V2.5medium Ling 3.1 FlashlowvsKAT-Coder-Pro V2.5medium GPT-6 LunamediumvsGLM 5.2high