Навигация
AI BENCHY
Your ad here

AI BENCHY Compare

Inception: Mercury 2 vs Nemotron 3 Super 120b A12b

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-03-12

Метрика Mercury 2 Mercury 2 medium Релиз: 2026-02-24 Nemotron 3 Super 120b A12b Nemotron 3 Super 120b A12b none Релиз: 2026-03-11 Бесплатно доступно
Ранг #40 #59
Средний балл 5.3 3.4
Стабильность 8.4 8.6
Стоимость за результат 0.631 0.000
Общая стоимость $0.045 $0.000
Тестов верно
Доля успешных попыток 54.2% 31.3%
Нестабильные тесты 3 3
Всего запусков 48 48
Выходные токены 3,708 4,222
Токены рассуждений 45,921 0
Время ответа (среднее) 2.36s 8.90s
Время ответа (макс.) 14.63s 24.97s
Время ответа (суммарно) 35.39s 142.40s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Средний балл vs Время ответа (среднее)

Общее число выходных токенов

Средний балл vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 7.3 9.8 66.7% 0 1.30s 2,531 2,410
Nemotron 3 Super 120b A12b 10.0 10.0 0.0% 0 7.14s 2,171 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 10.0 10.0 100.0% 0 3.28s 268 4,887
Nemotron 3 Super 120b A12b 10.0 10.0 0.0% 0 19.98s 124 0
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 5.5 5.9 83.3% 1 1.11s 183 1,656
Nemotron 3 Super 120b A12b 9.9 10.0 100.0% 0 7.92s 249 0
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 10.0 7.2 11.1% 1 6.48s 41 30,754
Nemotron 3 Super 120b A12b 10.0 7.2 22.2% 1 6.23s 26 0
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 4.0 10.0 0.0% 0 821ms 137 542
Nemotron 3 Super 120b A12b 3.0 9.9 0.0% 0 24.97s 170 0
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 10.0 10.0 100.0% 0 1.07s 14 958
Nemotron 3 Super 120b A12b 4.5 6.9 33.3% 1 1.50s 66 0
Puzzle Solving Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 1.7 7.5 22.2% 1 934ms 354 2,758
Nemotron 3 Super 120b A12b 4.7 10.0 33.3% 0 7.50s 1,135 0
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Mercury 2 10.0 10.0 100.0% 0 1.89s 180 1,956
Nemotron 3 Super 120b A12b 10.0 1.6 66.7% 1 16.00s 281 0

Быстрое сравнение

Сменить пару сравнения