Навигация
AI BENCHY
Your ad here

AI BENCHY Compare

Google: Gemma 4 26B A4B vs Inception: Mercury 2

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-04-04

Метрика Gemma 4 26B A4B Gemma 4 26B A4B none Релиз: 2026-04-03 Mercury 2 Mercury 2 medium Релиз: 2026-02-24
Оценка 6.3 6.3
Ранг #53 #52
Стабильность 9.1 8.5
Тестов верно
Доля успешных попыток 47.1% 51.0%
Нестабильные тесты 2 3
Всего запусков 51 51
Стоимость за результат 0.068 0.634
Общая стоимость $0.005 $0.045
???? ????? $0.130 / 1M $0.250 / 1M
???? ?????? $0.400 / 1M $0.750 / 1M
Выходные токены 1,335 3,723
Токены рассуждений 0 46,120
Время ответа (среднее) 6.56s 2.25s
Время ответа (макс.) 57.10s 14.63s
Время ответа (суммарно) 111.54s 35.99s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 26B A4B 8.3 10.0 75.0% 0 1.28s 230 0
Mercury 2 6.9 9.9 50.0% 0 1.12s 2,546 2,609
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 26B A4B 3.0 10.0 0.0% 0 30.53s 309 0
Mercury 2 10.0 10.0 100.0% 0 3.28s 268 4,887
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 26B A4B 10.0 10.0 100.0% 0 1.70s 285 0
Mercury 2 7.3 5.9 83.3% 1 1.11s 183 1,656
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 26B A4B 3.6 7.2 22.2% 1 2.49s 27 0
Mercury 2 2.9 7.2 11.1% 1 6.48s 41 30,754
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 26B A4B 4.0 10.0 0.0% 0 3.54s 85 0
Mercury 2 4.8 10.0 0.0% 0 821ms 137 542
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 26B A4B 4.4 6.9 16.7% 1 1.08s 75 0
Mercury 2 10.0 10.0 100.0% 0 1.07s 14 958
Puzzle Solving Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 26B A4B 5.7 10.0 33.3% 0 739ms 114 0
Mercury 2 3.9 7.5 22.2% 1 934ms 354 2,758
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Gemma 4 26B A4B 10.0 10.0 100.0% 0 57.10s 210 0
Mercury 2 10.0 10.0 100.0% 0 1.89s 180 1,956

Быстрое сравнение

Сменить пару сравнения