Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Nemotron 3 Ultra 550b A55b vs StepFun: Step 3.7 Flash

Сводка

Сравнение benchmark Nemotron 3 Ultra 550b A55b vs Step 3.7 Flash: Step 3.7 Flash лидирует по среднему баллу: 8.5 vs 8.1. Nemotron 3 Ultra 550b A55b имеет более низкую стоимость benchmark: $0.177 vs $0.376. Nemotron 3 Ultra 550b A55b быстрее: 15.05s vs 20.35s, с долей успешных попыток 69.8% vs 73.0%.

Рекомендуемая модель: Nemotron 3 Ultra 550b A55b - Его балл близок к лучшему здесь (8.1 против 8.5), при этом он примерно в 2.1 раза дешевле, чем Step 3.7 Flash.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-12

Метрика Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Релиз: 2026-06-04 Бесплатно доступно Step 3.7 Flash Step 3.7 Flash medium Релиз: 2026-05-29
Оценка 8.1 8.5
Ранг #29 #23
Надежность 9.7 9.9
Стабильность 8.8 9.3
Тестов верно
Доля успешных попыток 69.8% 73.0%
Нестабильные тесты 3 2
Всего запусков 63 61
Стоимость за результат 0.000 2.686
Общая стоимость $0.177 $0.376
Цена входа $0.500 / 1M $0.200 / 1M
Цена выхода $2.500 / 1M $1.150 / 1M
Общее число входных токенов 46,813 39,981
Выходные токены 18,002 319,958
Токены рассуждений 53,091 0
Время ответа (среднее) 15.05s 20.35s
Время ответа (макс.) 43.93s 113.98s
Время ответа (суммарно) 316.09s 427.42s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#29 Nemotron 3 Ultra 550b A55b

medium
No showcase result has been generated for this model yet.
Cost
$0.000
Time
-
Tokens
0 tok

#23 Step 3.7 Flash

medium
Cost
$0.006
Time
46.2s
Tokens
4,466 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
Step 3.7 Flash 8.7 7.9 91.7% 1 9.65s 756 32,185 0
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
Step 3.7 Flash 8.8 7.8 88.9% 1 27.42s 7,437 44,797 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
Step 3.7 Flash 10.0 10.0 100.0% 0 9.06s 13,683 7,106 0
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
Step 3.7 Flash 10.0 10.0 100.0% 0 2.75s 7,398 3,020 0
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
Step 3.7 Flash 7.7 10.0 66.7% 0 48.27s 708 70,347 0
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
Step 3.7 Flash 4.0 10.0 0.0% 0 6.85s 525 3,987 0
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
Step 3.7 Flash 9.8 10.0 100.0% 0 1.83s 735 2,166 0
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
Step 3.7 Flash 5.7 9.9 33.3% 0 6.19s 756 15,071 0
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
Step 3.7 Flash 10.0 10.0 100.0% 0 4.16s 7,746 2,115 0
Эрудиция Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240
Step 3.7 Flash 3.0 10.0 0.0% 0 113.98s 237 139,164 0

Быстрое сравнение

Сменить пару сравнения