AI BENCHY
Advertise here
#131

Mercury 2

Inception Релиз: 2026-02-24 Проверено: 2026-08-14 03:05 inception/mercury-2::medium
~100BДругоеЗакрытая модельОценка
(medium) (none)

Сводка

Mercury 2 набирает 7.0 в AI BENCHY и занимает #131. У модели надежность 10.0, доля успешных попыток 53.0%, общая стоимость $0.094 и среднее время ответа 2.95s.

Что делает Mercury 2 особенной: Сильнее всего модель выделяется в Следование инструкциям, где занимает #1; самая слабая область — Решение головоломок с #16.

Сведения о модели

Дата исследования: 2026-08-12

Оценка
Параметры
~100B
Архитектура
Другое
Доступность
Закрытая модель
Лицензия
-

Наиболее обоснованная оценка по открытым данным; поставщик раскрыл не все значения.

Стабильность

8.4

Общее число выходных токенов

87,554

Общее число входных токенов

110,515

Цена входа

$0.250 / 1M

Цена выхода

$0.750 / 1M

Тестов верно

Ошибочных тестов: 12

Доля успешных попыток: 53.0%

Нестабильные тесты

4

Нестабильные тесты имели смешанные результаты между прогонами (как минимум один успех и один провал).

Время ответа (среднее)

2.95s

Время ответа (макс.): 14.63s

Время ответа (суммарно): 61.89s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#131 Mercury 2

medium
Стоимость
$0.002
Время
2.1s
Токены
1,702 tok

История запусков

Проверено Оценка Надежность Тестов верно Общая стоимость Сравнить
2026-08-14 03:05 Повторный тест 7.0 10.0 $0.094 Текущий запуск
2026-07-16 23:14 Добавлен новый тест 7.0 10.0 $0.093 Сравнить
2026-06-04 14:27 Добавлен новый тест 6.6 10.0 $0.058 Сравнить
2026-05-22 00:40 Повторный тест 6.3 10.0 $0.055 Сравнить
2026-04-11 01:44 Первый зафиксированный запуск 6.5 Н/Д $0.047 Сравнить

Этот запуск использовал другой набор бенчмарков. Учитывайте изменения набора при чтении исторической динамики.

Сравнение запусков

ЗапускПокрытие бенчмаркаОценкаСтабильностьНадежностьТестов верноНестабильные тестыОбщее число выходных токеновОбщее число входных токеновОбщая стоимостьВремя ответа (среднее)
2026-08-14 03:05 · Текущий запуск66/66 попыток7.08.410.010/22487,554110,515$0.0942.95s
2026-07-16 23:14 · Добавлен новый тест66/66 попыток7.08.810.010/22387,119109,572$0.0932.72s
Разница0.0-0.40.00+1+435+943+$0.001+227ms

Эти два запуска использовали разные наборы бенчмарков, поэтому различия отражают и изменения модели, и изменения набора.

История цен

Исторические данные о ценах для этой модели из OpenRouter.

Дата Цена входа Цена выхода
2026-08-14 12:51 $0.250 / 1M $0.750 / 1M

Графики

Выберите первую модель, затем нажмите вторую, чтобы открыть страницу сравнения бок о бок.

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Быстрое сравнение

Разбивка по категориям

Категория Оценка Стабильность Тестов верно
Анти-ИИ уловки 6.9 9.9
Программирование 8.2 7.7
Комбинированный 6.7 9.1
Парсинг и извлечение данных 7.3 5.9
Предметно-ориентированное 2.9 4.4
Общий интеллект 4.8 10.0
Следование инструкциям 10.0 10.0
Решение головоломок 5.4 10.0
Вызов инструментов 10.0 10.0
Эрудиция 3.0 10.0

Сравниваемые модели