AI BENCHY Compare

OpenAI: GPT-5.4 Nano vs StepFun: Step 3.5 Flash

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-03-17

Метрика	GPT-5.4 Nano GPT-5.4 Nano none Релиз: 2026-03-17	Step 3.5 Flash Step 3.5 Flash medium Релиз: 2026-02-01 Бесплатно доступно

Метрика	GPT-5.4 Nano GPT-5.4 Nano none Релиз: 2026-03-17	Step 3.5 Flash Step 3.5 Flash medium Релиз: 2026-02-01 Бесплатно доступно
Ранг	#73	#22
Оценка	4.3	7.9
Стабильность	7.3	9.1
Стоимость за результат	0.404	0.000
Общая стоимость	$0.009	$0.000
Тестов верно
Доля успешных попыток	29.4%	70.6%
Нестабильные тесты	6	2
Всего запусков	51	49
Выходные токены	2,185	71,904
Токены рассуждений	0	155,607
Время ответа (среднее)	1.39s	26.78s
Время ответа (макс.)	3.84s	170.45s
Время ответа (суммарно)	23.70s	294.58s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
GPT-5.4 Nano	3.5	8.0	16.7%	1		1.18s	800	0
Step 3.5 Flash	10.0	10.0	100.0%	0		13.56s	14,376	17,668

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
GPT-5.4 Nano	3.0	10.0	0.0%	0		3.84s	280	0
Step 3.5 Flash	10.0	10.0	100.0%	0		29.57s	1,176	12,984

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
GPT-5.4 Nano	6.5	10.0	50.0%	0		1.11s	219	0
Step 3.5 Flash	10.0	10.0	100.0%	0		15.01s	600	13,886

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
GPT-5.4 Nano	2.9	4.4	22.2%	2		926ms	52	0
Step 3.5 Flash	5.3	7.2	44.4%	1		170.45s	45,350	90,436

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
GPT-5.4 Nano	3.8	2.5	33.3%	1		1.31s	180	0
Step 3.5 Flash	5.5	10.0	0.0%	0		6.54s	2,214	2,584

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
GPT-5.4 Nano	5.0	6.8	33.3%	1		787ms	84	0
Step 3.5 Flash	8.5	6.8	83.3%	1		4.98s	2,284	3,412

Puzzle Solving	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
GPT-5.4 Nano	3.7	7.3	22.2%	1		1.29s	348	0
Step 3.5 Flash	5.3	10.0	33.3%	0		7.72s	5,629	10,835

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
GPT-5.4 Nano	10.0	10.0	100.0%	0		3.40s	222	0
Step 3.5 Flash	10.0	10.0	100.0%	0		11.91s	275	3,802

Быстрое сравнение

Сменить пару сравнения

Gemini 3.1 Flash Lite PreviewnonevsStep 3.5 FlashmediumБесплатно доступно GPT-5.2 ChatnonevsStep 3.5 FlashmediumБесплатно доступно Gemini 3 Flash PreviewnonevsStep 3.5 FlashmediumБесплатно доступно Gemini 3.1 Flash Lite PreviewlowvsStep 3.5 FlashmediumБесплатно доступно GPT-5.4 NanononevsQwen3.5-9Bmedium GPT-5.3 ChatnonevsStep 3.5 FlashmediumБесплатно доступно GPT-5.4 NanononevsGLM 4.7 Flashmedium GPT-5.4 NanononevsQwen3 Coder Nextmedium Claude Sonnet 4.6nonevsStep 3.5 FlashmediumБесплатно доступно Gemini 3 Flash PreviewlowvsStep 3.5 FlashmediumБесплатно доступно Qwen3.5 Plus 2026-02-15nonevsStep 3.5 FlashmediumБесплатно доступно Step 3.5 FlashmediumБесплатно доступноvsGLM 5none