Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Inception: Mercury 2 vs Nemotron 3 Ultra 550b A55b

Сводка

Сравнение benchmark Mercury 2 vs Nemotron 3 Ultra 550b A55b: Nemotron 3 Ultra 550b A55b лидирует по среднему баллу: 8.1 vs 4.6. Mercury 2 имеет более низкую стоимость benchmark: $0.011 vs $0.158. Mercury 2 быстрее: 653ms vs 15.05s, с долей успешных попыток 23.8% vs 69.8%.

Рекомендуемая модель: Mercury 2 - Он дает лучший общий компромисс: конкурентный балл (4.6), ниже стоимость, чем у Nemotron 3 Ultra 550b A55b, и сбалансированное время ответа.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-18

Метрика Mercury 2 Mercury 2 none Релиз: 2026-02-24 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Релиз: 2026-06-04 Бесплатно доступно
Оценка 4.6 8.1
Ранг #151 #26
Надежность 10.0 9.7
Стабильность 9.2 8.8
Тестов верно
Доля успешных попыток 23.8% 69.8%
Нестабильные тесты 2 3
Всего запусков 63 63
Стоимость за результат 0.259 0.000
Общая стоимость $0.011 $0.158
Цена входа $0.250 / 1M $0.500 / 1M
Цена выхода $0.750 / 1M $2.200 / 1M
Общее число входных токенов 28,113 46,813
Выходные токены 4,439 18,002
Токены рассуждений 0 53,091
Время ответа (среднее) 653ms 15.05s
Время ответа (макс.) 1.43s 43.93s
Время ответа (суммарно) 13.72s 316.09s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#151 Mercury 2

none
Стоимость
$0.002
Время
1.8s
Токены
1,514 tok

#26 Nemotron 3 Ultra 550b A55b

medium
Неверный SVG
Стоимость
$0.000
Время
300.0s
Токены
0 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mercury 2 3.0 10.0 0.0% 0 483ms 631 286 0
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mercury 2 3.0 10.0 0.0% 0 606ms 4,821 131 0
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mercury 2 7.3 5.9 83.3% 1 667ms 6,362 180 0
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mercury 2 5.3 7.2 44.4% 1 534ms 784 46 0
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mercury 2 4.8 10.0 0.0% 0 628ms 495 159 0
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mercury 2 6.5 10.0 50.0% 0 551ms 691 82 0
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mercury 2 3.1 10.0 0.0% 0 535ms 694 251 0
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mercury 2 10.0 10.0 100.0% 0 1.27s 6,193 197 0
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
Эрудиция Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mercury 2 3.0 10.0 0.0% 0 548ms 213 19 0
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240

Быстрое сравнение

Сменить пару сравнения

Mercury 2nonevsQwen3 Coder NextmediumMercury 2nonevsMiniMax M2.5mediumDeepSeek V4 FlashhighvsNemotron 3 Ultra 550b A55bmediumБесплатно доступноCobuddymediumvsMercury 2noneMercury 2nonevsGLM 4.7 FlashmediumNemotron 3 Ultra 550b A55bmediumБесплатно доступноvsGPT-5.2 ChatnoneNemotron 3 Ultra 550b A55bmediumБесплатно доступноvsStep 3.7 FlashlowMercury 2nonevsMistral Small 4mediumDeepSeek V4 ProhighvsNemotron 3 Ultra 550b A55bmediumБесплатно доступноMercury 2nonevsMiniMax M2.7mediumNemotron 3 Ultra 550b A55bmediumБесплатно доступноvsGPT-5.3 ChatnoneGemini 3 Flash PreviewlowvsNemotron 3 Ultra 550b A55bmediumБесплатно доступно