Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs StepFun: Step 3.5 Flash

Сводка

Step 3.5 Flash (medium) лидирует по среднему баллу: 6.6 vs 6.2. KAT-Coder-Air V2.5 (high) имеет более низкую стоимость benchmark: $0.064 vs $0.070. KAT-Coder-Air V2.5 (high) быстрее: 11.02s vs 72.53s, с долей успешных попыток 46.0% vs 54.0%.

Рекомендуемая модельKAT-Coder-Air V2.5 (high)Его балл близок к лучшему здесь (6.2 против 6.6), и он отвечает примерно в 6.6 раза быстрее, чем Step 3.5 Flash (medium).

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-07-14

Метрика KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Релиз: 2026-07-14 Step 3.5 Flash Step 3.5 Flash medium Релиз: 2026-02-01
Оценка 6.2 6.6
Ранг #110 #98
Надежность 9.7 10.0
Стабильность 7.6 8.9
Тестов верно
Доля успешных попыток 46.0% 54.0%
Нестабильные тесты 6 1
Всего запусков 63 60
Стоимость за результат 0.910 0.198
Общая стоимость $0.064 $0.070
Цена входа $0.150 / 1M $0.100 / 1M
Цена выхода $0.600 / 1M $0.300 / 1M
Общее число входных токенов 41,748 34,431
Выходные токены 3,894 91,587
Токены рассуждений 91,773 195,973
Время ответа (среднее) 11.02s 72.53s
Время ответа (макс.) 104.98s 453.94s
Время ответа (суммарно) 231.37s 1015.47s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 KAT-Coder-Air V2.5

high
Неверный SVG
Стоимость
$0.000
Время
300.0s
Токены
0 tok

#98 Step 3.5 Flash

medium
Стоимость
$0.008
Время
277.1s
Токены
23,695 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
Step 3.5 Flash 2.4 5.2 0.0% 0 258.38s 2,211 13,207 22,429

Быстрое сравнение

Сменить пару сравнения