Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs StepFun: Step 3.7 Flash

Сводка

Step 3.7 Flash (low) лидирует по среднему баллу: 7.7 vs 7.5. KAT-Coder-Pro V2.5 (medium) имеет более низкую стоимость benchmark: $0.275 vs $0.341. KAT-Coder-Pro V2.5 (medium) быстрее: 12.95s vs 15.74s, с долей успешных попыток 65.1% vs 68.3%.

Рекомендуемая модельKAT-Coder-Pro V2.5 (medium)Он дает лучший общий компромисс: конкурентный балл (7.5), ниже стоимость, чем у Step 3.7 Flash (low), и сбалансированное время ответа.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-07-14

Метрика KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Релиз: 2026-07-14 Step 3.7 Flash Step 3.7 Flash low Релиз: 2026-05-29
Оценка 7.5 7.7
Ранг #60 #51
Надежность 10.0 10.0
Стабильность 7.7 8.4
Тестов верно
Доля успешных попыток 65.1% 68.3%
Нестабильные тесты 6 4
Всего запусков 63 63
Стоимость за результат 2.498 2.840
Общая стоимость $0.275 $0.341
Цена входа $0.740 / 1M $0.200 / 1M
Цена выхода $2.960 / 1M $1.150 / 1M
Общее число входных токенов 42,750 40,101
Выходные токены 2,098 289,325
Токены рассуждений 80,027 0
Время ответа (среднее) 12.95s 15.74s
Время ответа (макс.) 81.45s 124.75s
Время ответа (суммарно) 271.92s 330.63s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
Стоимость
$0.009
Время
25.6s
Токены
2,939 tok

#51 Step 3.7 Flash

low
Неверный SVG
Стоимость
$0.004
Время
25.3s
Токены
3,072 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

Быстрое сравнение

Сменить пару сравнения