Навигация
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

IBM: Granite 4.1 8B vs Inception: Mercury 2

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-05-01

Метрика Granite 4.1 8B Granite 4.1 8B none Релиз: 2026-05-01 Mercury 2 Mercury 2 none Релиз: 2026-02-24
Оценка 4.3 4.8
Ранг #135 #125
Надежность 10.0 Н/Д
Стабильность 10.0 9.0
Тестов верно
Доля успешных попыток 11.1% 27.8%
Нестабильные тесты 0 2
Всего запусков 54 54
Стоимость за результат 0.110 0.165
Общая стоимость $0.003 $0.007
???? ????? $0.050 / 1M $0.250 / 1M
???? ?????? $0.100 / 1M $0.750 / 1M
Выходные токены 2,712 1,625
Токены рассуждений 0 0
Время ответа (среднее) 767ms 613ms
Время ответа (макс.) 2.17s 1.27s
Время ответа (суммарно) 13.81s 11.04s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Granite 4.1 8B 4.9 10.0 25.0% 0 844ms 903 0
Mercury 2 3.0 10.0 0.0% 0 483ms 286 0
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Granite 4.1 8B 6.9 10.0 0.0% 0 1.07s 339 0
Mercury 2 3.6 8.9 0.0% 0 969ms 310 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Granite 4.1 8B 3.0 10.0 0.0% 0 1.88s 396 0
Mercury 2 3.0 10.0 0.0% 0 606ms 131 0
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Granite 4.1 8B 3.0 10.0 0.0% 0 575ms 195 0
Mercury 2 7.3 5.9 83.3% 1 667ms 180 0
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Granite 4.1 8B 3.0 10.0 0.0% 0 357ms 24 0
Mercury 2 5.3 7.2 44.4% 1 534ms 46 0
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Granite 4.1 8B 4.0 10.0 0.0% 0 499ms 115 0
Mercury 2 4.8 10.0 0.0% 0 628ms 159 0
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Granite 4.1 8B 3.6 9.9 0.0% 0 344ms 66 0
Mercury 2 6.5 10.0 50.0% 0 551ms 82 0
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Granite 4.1 8B 3.7 10.0 0.0% 0 635ms 431 0
Mercury 2 3.1 10.0 0.0% 0 533ms 234 0
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
Granite 4.1 8B 10.0 10.0 100.0% 0 2.17s 243 0
Mercury 2 10.0 10.0 100.0% 0 1.27s 197 0

Быстрое сравнение

Сменить пару сравнения