Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.4 Nano

Сводка

KAT-Coder-Pro V2.5 (high) лидирует по среднему баллу: 7.7 vs 7.5. GPT-5.4 Nano (medium) имеет более низкую стоимость benchmark: $0.107 vs $0.246. GPT-5.4 Nano (medium) быстрее: 11.95s vs 12.30s, с долей успешных попыток 63.5% vs 63.5%.

Рекомендуемая модельGPT-5.4 Nano (medium)Его балл близок к лучшему здесь (7.5 против 7.7), при этом он примерно в 2.3 раза дешевле, чем KAT-Coder-Pro V2.5 (high).

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-07-14

Метрика KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Релиз: 2026-07-14 GPT-5.4 Nano GPT-5.4 Nano medium Релиз: 2026-03-17
Оценка 7.7 7.5
Ранг #53 #62
Надежность 10.0 10.0
Стабильность 8.1 8.4
Тестов верно
Доля успешных попыток 63.5% 63.5%
Нестабильные тесты 5 4
Всего запусков 63 63
Стоимость за результат 2.228 0.969
Общая стоимость $0.246 $0.107
Цена входа $0.740 / 1M $0.200 / 1M
Цена выхода $2.960 / 1M $1.250 / 1M
Общее число входных токенов 42,750 35,434
Выходные токены 2,509 3,014
Токены рассуждений 69,594 76,520
Время ответа (среднее) 12.30s 11.95s
Время ответа (макс.) 95.65s 94.06s
Время ответа (суммарно) 258.34s 250.98s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#53 KAT-Coder-Pro V2.5

high
Стоимость
$0.009
Время
26.4s
Токены
3,117 tok

#62 GPT-5.4 Nano

medium
Стоимость
$0.007
Время
24.6s
Токены
4,943 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
GPT-5.4 Nano 6.1 4.7 66.7% 2 19.12s 7,305 516 20,778

Быстрое сравнение

Сменить пару сравнения