AI BENCHY
Advertise here
#58

KAT-Coder-Pro V2.5

Kwaipilot Релиз: 2026-07-14 Проверено: 2026-07-16 23:38 kwaipilot/kat-coder-pro-v2.5::low
~700B всего (~72B активных)MoEЗакрытая модельОценка

Сводка

KAT-Coder-Pro V2.5 набирает 7.4 в AI BENCHY и занимает #58. У модели надежность 10.0, доля успешных попыток 69.7%, общая стоимость $0.387 и среднее время ответа 19.47s.

Сведения о модели

Дата исследования: 2026-08-12

Оценка
Параметры
~700B всего (~72B активных)
Архитектура
MoE
Доступность
Закрытая модель
Лицензия
-

Наиболее обоснованная оценка по открытым данным; поставщик раскрыл не все значения.

Стабильность

7.0

Общее число выходных токенов

108,640

Общее число входных токенов

87,673

Цена входа

$0.740 / 1M

Цена выхода

$2.960 / 1M

Тестов верно

Ошибочных тестов: 11

Доля успешных попыток: 69.7%

Нестабильные тесты

8

Нестабильные тесты имели смешанные результаты между прогонами (как минимум один успех и один провал).

Время ответа (среднее)

19.47s

Время ответа (макс.): 209.15s

Время ответа (суммарно): 428.31s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#58 KAT-Coder-Pro V2.5

low
Стоимость
$0.016
Время
47.6s
Токены
5,182 tok

История запусков

Проверено Оценка Надежность Тестов верно Общая стоимость Сравнить
2026-08-14 03:23 Повторный тест 7.3 10.0 $0.400 Сравнить
2026-07-16 23:38 Добавлен новый тест 7.4 10.0 $0.387 Текущий запуск
2026-07-14 11:05 Первый запуск 8.0 9.9 $0.220 Сравнить

Этот запуск использовал другой набор бенчмарков. Учитывайте изменения набора при чтении исторической динамики.

Сравнение запусков

ЗапускПокрытие бенчмаркаОценкаСтабильностьНадежностьТестов верноНестабильные тестыОбщее число выходных токеновОбщее число входных токеновОбщая стоимостьВремя ответа (среднее)
2026-07-16 23:38 · Добавлен новый тест66/66 попыток7.47.010.011/228108,64087,673$0.38719.47s
2026-07-14 11:05 · Первый запуск63/63 попыток8.07.39.911/21763,30042,750$0.22010.44s
Разница-0.6-0.3+0.10+1+45340+44923+$0.168+9032ms

Покрытие бенчмарка различается: 66/66 попыток (Цель: 3 повторов на тест) против 63/63 попыток (Цель: 3 повторов на тест). Итоги и метрики, зависящие от числа повторов, нельзя сравнивать напрямую.

Эти два запуска использовали разные наборы бенчмарков, поэтому различия отражают и изменения модели, и изменения набора.

История цен

Исторические данные о ценах для этой модели из OpenRouter.

Дата Цена входа Цена выхода
2026-07-14 11:25 $0.740 / 1M $2.960 / 1M

Графики

Выберите первую модель, затем нажмите вторую, чтобы открыть страницу сравнения бок о бок.

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Быстрое сравнение

Разбивка по категориям

Категория Оценка Стабильность Тестов верно
Анти-ИИ уловки 6.9 5.8
Программирование 7.8 10.0
Комбинированный 6.4 5.8
Парсинг и извлечение данных 10.0 10.0
Предметно-ориентированное 4.1 4.4
Общий интеллект 4.1 2.7
Следование инструкциям 10.0 10.0
Решение головоломок 6.4 4.4
Вызов инструментов 10.0 10.0
Эрудиция 3.0 10.0

Сравниваемые модели