Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

OpenAI: GPT-5.3-Codex vs StepFun: Step 3.7 Flash

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-05-29

Метрика GPT-5.3-Codex GPT-5.3-Codex medium Релиз: 2026-02-05 Step 3.7 Flash Step 3.7 Flash low Релиз: 2026-05-29
Оценка 8.3 7.4
Ранг #17 #60
Надежность 10.0 10.0
Стабильность 8.4 8.7
Тестов верно
Доля успешных попыток 81.7% 68.3%
Нестабильные тесты 4 3
Всего запусков 60 60
Стоимость за результат 4.887 2.796
Общая стоимость $0.685 $0.336
Цена входа $1.750 / 1M $0.200 / 1M
Цена выхода $14.000 / 1M $1.150 / 1M
Выходные токены 2,336 285,209
Токены рассуждений 42,565 0
Время ответа (среднее) 15.95s 16.06s
Время ответа (макс.) 100.93s 124.75s
Время ответа (суммарно) 319.08s 321.11s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
GPT-5.3-Codex 8.7 7.9 91.7% 1 4.16s 240 1,722
Step 3.7 Flash 8.7 7.9 91.7% 1 4.02s 10,896 0
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
GPT-5.3-Codex 10.0 10.0 100.0% 0 18.45s 514 7,266
Step 3.7 Flash 10.0 10.0 100.0% 0 9.43s 14,569 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
GPT-5.3-Codex 10.0 10.0 100.0% 0 19.56s 364 2,731
Step 3.7 Flash 10.0 10.0 100.0% 0 7.98s 6,426 0
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
GPT-5.3-Codex 10.0 10.0 100.0% 0 3.07s 234 728
Step 3.7 Flash 7.3 5.8 83.3% 1 2.29s 2,667 0
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
GPT-5.3-Codex 5.9 7.2 55.6% 1 64.31s 64 25,308
Step 3.7 Flash 5.3 7.2 44.4% 1 43.31s 104,487 0
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
GPT-5.3-Codex 4.6 10.0 0.0% 0 4.87s 187 331
Step 3.7 Flash 3.4 9.3 0.0% 0 7.00s 4,604 0
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
GPT-5.3-Codex 10.0 10.0 100.0% 0 3.04s 93 693
Step 3.7 Flash 9.8 10.0 100.0% 0 1.58s 1,857 0
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
GPT-5.3-Codex 9.0 7.9 88.9% 1 5.05s 356 1,593
Step 3.7 Flash 5.5 9.9 33.3% 0 1.84s 3,564 0
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
GPT-5.3-Codex 10.0 10.0 100.0% 0 6.37s 254 492
Step 3.7 Flash 10.0 10.0 100.0% 0 3.25s 1,360 0
Эрудиция Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
GPT-5.3-Codex 2.8 1.6 33.3% 1 14.43s 30 1,701
Step 3.7 Flash 3.0 10.0 0.0% 0 124.75s 134,779 0

Быстрое сравнение

Сменить пару сравнения