Навигация
AI BENCHY
Your ad here

AI BENCHY Compare

Google: Gemma 4 31B vs Inception: Mercury 2

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-04-02

Метрика Gemma 4 31B Gemma 4 31B none Релиз: 2026-04-02 Mercury 2 Mercury 2 medium Релиз: 2026-02-24
Оценка 6.7 6.3
Ранг #47 #51
Стабильность 10.0 8.5
Тестов верно
Доля успешных попыток 52.9% 51.0%
Нестабильные тесты 0 3
Всего запусков 51 51
Стоимость за результат 0.023 0.634
Общая стоимость $0.002 $0.045
???? ????? $0.140 / 1M $0.250 / 1M
???? ?????? $0.400 / 1M $0.750 / 1M
Выходные токены 660 3,723
Токены рассуждений 0 46,120
Время ответа (среднее) 2.55s 2.25s
Время ответа (макс.) 4.68s 14.63s
Время ответа (суммарно) 38.20s 35.99s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 31B 6.5 10.0 50.0% 0 1.85s 45 0
Mercury 2 6.9 9.9 50.0% 0 1.12s 2,546 2,609
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0
Mercury 2 10.0 10.0 100.0% 0 3.28s 268 4,887
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 31B 10.0 10.0 100.0% 0 2.25s 285 0
Mercury 2 7.3 5.9 83.3% 1 1.11s 183 1,656
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 31B 7.7 10.0 66.7% 0 3.22s 27 0
Mercury 2 2.9 7.2 11.1% 1 6.48s 41 30,754
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 31B 10.0 10.0 100.0% 0 2.09s 117 0
Mercury 2 4.8 10.0 0.0% 0 821ms 137 542
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 31B 6.5 10.0 50.0% 0 2.84s 78 0
Mercury 2 10.0 10.0 100.0% 0 1.07s 14 958
Puzzle Solving Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 31B 5.5 10.0 33.3% 0 2.95s 108 0
Mercury 2 3.9 7.5 22.2% 1 934ms 354 2,758
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0
Mercury 2 10.0 10.0 100.0% 0 1.89s 180 1,956

Быстрое сравнение

Сменить пару сравнения