AI BENCHY Compare

Qwen: Qwen3.5-35B-A3B vs StepFun: Step 3.5 Flash

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-05-29

Метрика	Qwen3.5-35B-A3B Qwen3.5-35B-A3B medium Релиз: 2026-02-24	Step 3.5 Flash Step 3.5 Flash medium Релиз: 2026-02-01

Метрика	Qwen3.5-35B-A3B Qwen3.5-35B-A3B medium Релиз: 2026-02-24	Step 3.5 Flash Step 3.5 Flash medium Релиз: 2026-02-01
Оценка	7.3	7.4
Ранг	#68	#61
Надежность	10.0	10.0
Стабильность	7.5	9.1
Тестов верно
Доля успешных попыток	73.3%	62.3%
Нестабильные тесты	6	2
Всего запусков	60	57
Стоимость за результат	4.865	0.133
Общая стоимость	$0.536	$0.015
Цена входа	$0.139 / 1M	$0.090 / 1M
Цена выхода	$1.000 / 1M	$0.300 / 1M
Выходные токены	31,242	90,478
Токены рассуждений	330,546	173,544
Время ответа (среднее)	69.66s	43.20s
Время ответа (макс.)	409.98s	170.45s
Время ответа (суммарно)	1393.17s	561.54s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Qwen3.5-35B-A3B	10.0	10.0	100.0%	0		21.13s	798	42,652
Step 3.5 Flash	10.0	10.0	100.0%	0		40.57s	20,391	24,176

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Qwen3.5-35B-A3B	6.5	10.0	50.0%	0		244.54s	14,456	88,431
Step 3.5 Flash	3.5	6.0	50.0%	1		62.83s	12,098	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Qwen3.5-35B-A3B	4.7	1.6	66.7%	1		75.34s	775	12,485
Step 3.5 Flash	10.0	10.0	100.0%	0		29.57s	1,176	12,984

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Qwen3.5-35B-A3B	7.3	5.9	83.3%	1		59.33s	235	19,493
Step 3.5 Flash	10.0	10.0	100.0%	0		15.01s	600	13,886

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Qwen3.5-35B-A3B	4.1	4.4	44.5%	2		88.34s	41	46,368
Step 3.5 Flash	5.3	7.2	44.4%	1		170.45s	45,350	90,436

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Qwen3.5-35B-A3B	2.8	1.6	33.3%	1		30.30s	20	3,753
Step 3.5 Flash	5.5	10.0	0.0%	0		22.39s	240	3,506

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Qwen3.5-35B-A3B	10.0	10.0	100.0%	0		24.45s	97	17,361
Step 3.5 Flash	8.3	10.0	50.0%	0		4.78s	2,364	3,521

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Qwen3.5-35B-A3B	8.2	7.2	88.9%	1		33.13s	3,592	26,585
Step 3.5 Flash	5.3	10.0	33.3%	0		7.22s	5,630	10,861

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Qwen3.5-35B-A3B	10.0	10.0	100.0%	0		4.65s	309	1,365
Step 3.5 Flash	10.0	10.0	100.0%	0		11.91s	275	3,802

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Выходные токены	Токены рассуждений
Qwen3.5-35B-A3B	3.0	10.0	0.0%	0		177.35s	10,919	72,053
Step 3.5 Flash	3.0	10.0	0.0%	0		108.45s	2,354	10,372

Быстрое сравнение

Сменить пару сравнения

Claude Opus 4.8nonevsQwen3.5-35B-A3Bmedium Ring-2.6-1TnonevsQwen3.5-35B-A3Bmedium GPT-5.3 ChatnonevsStep 3.5 Flashmedium Gemini 3.1 Flash LitelowvsStep 3.5 Flashmedium Gemini 3.1 Flash Lite PreviewnonevsStep 3.5 Flashmedium Claude Opus 4.8nonevsStep 3.5 Flashmedium Qwen3.5-35B-A3BmediumvsStep 3.7 Flashhigh Qwen3.5-35B-A3BmediumvsStep 3.7 Flashlow Ring-2.6-1TnonevsStep 3.5 Flashmedium GPT-5.3 ChatnonevsQwen3.5-35B-A3Bmedium Gemini 3.1 Flash LitelowvsQwen3.5-35B-A3Bmedium Gemini 3.1 Flash Lite PreviewnonevsQwen3.5-35B-A3Bmedium