Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Nemotron 3 Ultra 550b A55b vs StepFun: Step 3.5 Flash

Сводка

Сравнение benchmark Nemotron 3 Ultra 550b A55b vs Step 3.5 Flash: Nemotron 3 Ultra 550b A55b лидирует по среднему баллу: 8.1 vs 2.6. Step 3.5 Flash имеет более низкую стоимость benchmark: $0.020 vs $0.158. Nemotron 3 Ultra 550b A55b быстрее: 15.05s vs 39.03s, с долей успешных попыток 69.8% vs 28.6%.

Рекомендуемая модель: Nemotron 3 Ultra 550b A55b - Здесь у него лучший балл (8.1), и он отвечает примерно в 2.6 раза быстрее, чем Step 3.5 Flash.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-18

Метрика Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Релиз: 2026-06-04 Бесплатно доступно Step 3.5 Flash Step 3.5 Flash none Релиз: 2026-02-01
Оценка 8.1 2.6
Ранг #26 #168
Надежность 9.7 10.0
Стабильность 8.8 5.7
Тестов верно
Доля успешных попыток 69.8% 28.6%
Нестабильные тесты 3 0
Всего запусков 63 36
Стоимость за результат 0.000 0.328
Общая стоимость $0.158 $0.020
Цена входа $0.500 / 1M $0.090 / 1M
Цена выхода $2.200 / 1M $0.300 / 1M
Общее число входных токенов 46,813 1,971
Выходные токены 18,002 64,795
Токены рассуждений 53,091 0
Время ответа (среднее) 15.05s 39.03s
Время ответа (макс.) 43.93s 114.12s
Время ответа (суммарно) 316.09s 312.26s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#26 Nemotron 3 Ultra 550b A55b

medium
Неверный SVG
Стоимость
$0.000
Время
300.0s
Токены
0 tok

#168 Step 3.5 Flash

none
Стоимость
$0.005
Время
156.3s
Токены
13,887 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
Step 3.5 Flash 10.0 10.0 100.0% 0 34.99s 691 21,766 0
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
Step 3.5 Flash 9.8 3.3 0.0% 0 0ms 0 0 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
Step 3.5 Flash 3.0 10.0 0.0% 0 0ms 0 0 0
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
Step 3.5 Flash 1.5 5.0 0.0% 0 0ms 0 0 0
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
Step 3.5 Flash 3.3 3.3 33.3% 0 34.54s 165 7,389 0
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
Step 3.5 Flash 4.0 10.0 0.0% 0 14.37s 509 2,451 0
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
Step 3.5 Flash 5.0 5.0 50.0% 0 9.30s 384 1,427 0
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
Step 3.5 Flash 0.0 0.0 0.0% 0 0ms 0 0 0
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
Step 3.5 Flash 3.0 10.0 0.0% 0 0ms 0 0 0
Эрудиция Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240
Step 3.5 Flash 3.0 10.0 0.0% 0 114.12s 222 31,762 0

Быстрое сравнение

Сменить пару сравнения

DeepSeek V4 FlashhighvsNemotron 3 Ultra 550b A55bmediumБесплатно доступноNemotron 3 Ultra 550b A55bmediumБесплатно доступноvsGPT-5.2 ChatnoneNemotron 3 Ultra 550b A55bmediumБесплатно доступноvsStep 3.7 FlashlowDeepSeek V4 ProhighvsNemotron 3 Ultra 550b A55bmediumБесплатно доступноNemotron 3 Ultra 550b A55bmediumБесплатно доступноvsGPT-5.3 ChatnoneGemini 3 Flash PreviewlowvsNemotron 3 Ultra 550b A55bmediumБесплатно доступноClaude Sonnet 4.6nonevsNemotron 3 Ultra 550b A55bmediumБесплатно доступноClaude Opus 4.8nonevsNemotron 3 Ultra 550b A55bmediumБесплатно доступноDeepSeek V4 PrononevsNemotron 3 Ultra 550b A55bmediumБесплатно доступноNemotron 3 Ultra 550b A55bmediumБесплатно доступноvsQwen3.7 PlusnoneNemotron 3 Ultra 550b A55bmediumБесплатно доступноvsGLM 5.2noneNemotron 3 Ultra 550b A55bmediumБесплатно доступноvsStep 3.7 Flashhigh