Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs StepFun: Step 3.5 Flash

Сводка

KAT-Coder-Pro V2.5 лидирует по среднему баллу: 6.8 vs 6.6. Step 3.5 Flash (medium) имеет более низкую стоимость benchmark: $0.070 vs $0.220. KAT-Coder-Pro V2.5 быстрее: 10.81s vs 72.53s, с долей успешных попыток 71.4% vs 54.0%.

Рекомендуемая модельKAT-Coder-Pro V2.5Здесь у него лучший балл (6.8), и он отвечает примерно в 6.7 раза быстрее, чем Step 3.5 Flash (medium).

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-07-14

Метрика KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none Релиз: 2026-07-14 Step 3.5 Flash Step 3.5 Flash medium Релиз: 2026-02-01
Оценка 6.8 6.6
Ранг #89 #98
Надежность 10.0 10.0
Стабильность 7.3 8.9
Тестов верно
Доля успешных попыток 71.4% 54.0%
Нестабильные тесты 7 1
Всего запусков 63 60
Стоимость за результат 1.992 0.198
Общая стоимость $0.220 $0.070
Цена входа $0.740 / 1M $0.100 / 1M
Цена выхода $2.960 / 1M $0.300 / 1M
Общее число входных токенов 42,749 34,431
Выходные токены 63,338 91,587
Токены рассуждений 0 195,973
Время ответа (среднее) 10.81s 72.53s
Время ответа (макс.) 53.57s 453.94s
Время ответа (суммарно) 227.02s 1015.47s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 KAT-Coder-Pro V2.5

none
Стоимость
$0.010
Время
29.0s
Токены
3,439 tok

#98 Step 3.5 Flash

medium
Стоимость
$0.008
Время
277.1s
Токены
23,695 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
Step 3.5 Flash 2.4 5.2 0.0% 0 258.38s 2,211 13,207 22,429

Быстрое сравнение

Сменить пару сравнения