- Ранг
- #259
- Общее число выходных токенов
- 82,585
- Время ответа (среднее)
- 3.51s
- Общая стоимость
- $0.018
Mercury 2.5 Preview vs GPT-4o-mini
Средний балл практически равен: 4.9 vs 5.0. GPT-4o-mini имеет более низкую стоимость benchmark: $0.010 vs $0.018. GPT-4o-mini быстрее: 1.92s vs 3.51s, с долей успешных попыток 30.3% vs 22.7%.
- Ранг
- #257
- Общее число выходных токенов
- 2,913
- Время ответа (среднее)
- 1.92s
- Общая стоимость
- $0.010
Рекомендуемая модель
GPT-4o-mini
Здесь у него лучший балл (5.0), при этом он примерно в 1.8 раза дешевле, чем Mercury 2.5 Preview.
Подробное сравнение
| Метрика | Mercury 2.5 Preview Mercury 2.5 Preview none | GPT-4o-mini GPT-4o-mini none |
|---|---|---|
| Оценка | 4.9 | 5.0 |
| Ранг | #259 | #257 |
| Надежность | 10.0 | 10.0 |
| Стабильность | 8.3 | 9.9 |
| Попытки | 66/66 | 66/66 |
| Тестов верно | ||
| Доля успешных попыток | 30.3% | 22.7% |
| Нестабильные тесты | 5 | 0 |
| Всего запусков | 66 | 66 |
| Стоимость за результат | 0.440 | 0.195 |
| Общая стоимость | $0.018 | $0.010 |
| Цена входа | $0.040 / 1M | $0.150 / 1M |
| Цена выхода | $0.150 / 1M | $0.600 / 1M |
| Общее число входных токенов | 130,296 | 53,145 |
| Выходные токены | 82,585 | 2,913 |
| Токены рассуждений | 0 | 0 |
| Время ответа (среднее) | 3.51s | 1.92s |
| Время ответа (макс.) | 60.70s | 7.58s |
| Время ответа (суммарно) | 77.28s | 30.71s |
| Параметры | ~100B | ~8B |
| Доступность | Закрытая модель | Закрытая модель |
Генерация showcase моделей
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#259 Mercury 2.5 Preview
none
Неверный SVG
- Стоимость
- $0.001
- Время
- 3.3s
- Токены
- 3,122 tok
#257 GPT-4o-mini
none- Стоимость
- $0.001
- Время
- 6.6s
- Токены
- 742 tok
Лучшие модели по оценке
Оценка vs общая стоимость
Время ответа (среднее)
Оценка vs Время ответа (среднее)
Общее число выходных токенов
Оценка vs Общее число выходных токенов
Разбивка по категориям
| Анти-ИИ уловки | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.8 | 8.3 | 16.7% | 1 | 655ms | 812 | 256 | 0 | |
| GPT-4o-mini | 4.8 | 10.0 | 25.0% | 0 | 1.34s | 618 | 186 | 0 |
| Программирование | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 4.7 | 7.9 | 22.2% | 1 | 459ms | 7,850 | 650 | 0 | |
| GPT-4o-mini | 3.2 | 9.6 | 0.0% | 0 | 1.63s | 7,314 | 367 | 0 |
| Комбинированный | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.0 | 10.0 | 0.0% | 0 | 31.28s | 101,129 | 80,273 | 0 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 6.32s | 29,916 | 1,497 | 0 |
| Парсинг и извлечение данных | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 6.3 | 5.8 | 66.7% | 1 | 1.04s | 8,333 | 672 | 0 | |
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 1.27s | 7,161 | 183 | 0 |
| Предметно-ориентированное | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.6 | 7.2 | 22.2% | 1 | 631ms | 875 | 40 | 0 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 743ms | 741 | 17 | 0 |
| Общий интеллект | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 5.0 | 10.0 | 0.0% | 0 | 482ms | 544 | 85 | 0 | |
| GPT-4o-mini | 4.0 | 10.0 | 0.0% | 0 | 909ms | 480 | 66 | 0 |
| Следование инструкциям | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 6.3 | 10.0 | 50.0% | 0 | 1.26s | 753 | 73 | 0 | |
| GPT-4o-mini | 6.3 | 10.0 | 50.0% | 0 | 1.11s | 666 | 69 | 0 |
| Решение головоломок | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 5.6 | 7.4 | 44.4% | 1 | 684ms | 796 | 292 | 0 | |
| GPT-4o-mini | 3.5 | 10.0 | 0.0% | 0 | 1.21s | 651 | 308 | 0 |
| Вызов инструментов | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 10.0 | 10.0 | 100.0% | 0 | 1.29s | 8,969 | 229 | 0 | |
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 2.51s | 5,400 | 205 | 0 |
| Эрудиция | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 Preview | 3.0 | 10.0 | 0.0% | 0 | 419ms | 235 | 15 | 0 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 794ms | 198 | 15 | 0 |
Быстрое сравнение
Сменить пару сравнения
GPT-4o-mininonevsLaguna S 2.1lowБесплатно доступноMercury 2.5 PreviewlowvsGPT-4o-mininoneMiniMax M2.7mediumvsGPT-4o-mininoneMercury 2.5 PreviewnonevsLaguna S 2.1lowБесплатно доступноMercury 2.5 PreviewnonevsNemotron 3.5 LightninglowБесплатно доступноMercury 2.5 PreviewnonevsMiniMax M2.7mediumTrinity Large ThinkinghighvsMercury 2.5 PreviewnoneNemotron 3.5 LightninglowБесплатно доступноvsGPT-4o-mininoneTrinity Large ThinkinghighvsGPT-4o-mininoneGranite 4.2 8BlowvsGPT-4o-mininoneMistral Small 4mediumvsGPT-4o-mininoneNemotron 3.5 LightningmediumБесплатно доступноvsGPT-4o-mininone