- Ранг
- #66
- Общее число выходных токенов
- 73,261
- Время ответа (среднее)
- 15.01s
- Общая стоимость
- $1.438
Claude Sonnet 5 (medium) vs Gemini 3.1 Pro Preview (medium)
Claude Sonnet 5 (medium) лидирует по среднему баллу: 8.5 vs 8.4. Claude Sonnet 5 (medium) имеет более низкую стоимость benchmark: $1.438 vs $1.585. Claude Sonnet 5 (medium) быстрее: 15.01s vs 22.71s, с долей успешных попыток 76.8% vs 89.9%.
Сравниваемые модели
- Ранг
- #71
- Общее число выходных токенов
- 102,691
- Время ответа (среднее)
- 22.71s
- Общая стоимость
- $1.585
Рекомендуемая модель
Claude Sonnet 5 (medium)
Здесь у него лучший балл (8.5), и он отвечает примерно в 1.5 раза быстрее, чем Gemini 3.1 Pro Preview (medium).
Подробное сравнение
| Метрика | Claude Sonnet 5 Claude Sonnet 5 medium | Gemini 3.1 Pro Preview Gemini 3.1 Pro Preview medium |
|---|---|---|
| Оценка | 8.5 | 8.4 |
| Ранг | #66 | #71 |
| Надежность | 10.0 | 9.8 |
| Стабильность | 9.1 | 9.6 |
| Попытки | 69/69 | 69/69 |
| Тестов верно | ||
| Доля успешных попыток | 76.8% | 89.9% |
| Нестабильные тесты | 3 | 1 |
| Всего запусков | 69 | 69 |
| Стоимость за результат | 8.985 | 7.924 |
| Общая стоимость | $1.438 | $1.585 |
| Цена входа | $2.000 / 1M | $2.000 / 1M |
| Цена выхода | $10.000 / 1M | $12.000 / 1M |
| Цена чтения из кэша | $0.200 / 1M | $0.200 / 1M |
| Цена записи в кэш | $2.500 / 1M | $0.375 / 1M |
| Общее число входных токенов | 353,658 | 176,208 |
| Выходные токены | 54,891 | 6,093 |
| Токены рассуждений | 18,370 | 96,598 |
| Время ответа (среднее) | 15.01s | 22.71s |
| Время ответа (макс.) | 69.26s | 88.68s |
| Время ответа (суммарно) | 345.16s | 386.11s |
| Параметры | ~1T всего (~100B активных) | ~1.2T всего (~20B активных) |
| Доступность | Закрытая модель | Закрытая модель |
Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.
Генерация showcase моделей
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#66 Claude Sonnet 5
medium- Стоимость
- $0.007
- Время
- 6.4s
- Токены
- 832 tok
#71 Gemini 3.1 Pro Preview
medium- Стоимость
- $0.115
- Время
- 87.2s
- Токены
- 9,629 tok
Лучшие модели по оценке
Оценка vs общая стоимость
Время ответа (среднее)
Оценка vs Время ответа (среднее)
Общее число выходных токенов
Оценка vs Общее число выходных токенов
Разбивка по категориям
| Агентные задачи | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5 | 10.0 | 10.0 | 100.0% | 0 | 69.26s | 207,705 | 2,561 | 7,496 | |
| Gemini 3.1 Pro Preview | 4.7 | 1.6 | 66.7% | 1 | 56.17s | 83,912 | 861 | 4,592 |
| Анти-ИИ уловки | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5 | 10.0 | 10.0 | 100.0% | 0 | 3.80s | 834 | 1,220 | 446 | |
| Gemini 3.1 Pro Preview | 10.0 | 10.0 | 100.0% | 0 | 7.90s | 498 | 112 | 3,218 |
| Программирование | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5 | 9.0 | 7.9 | 88.9% | 1 | 17.28s | 10,590 | 13,153 | 2,379 | |
| Gemini 3.1 Pro Preview | 7.9 | 9.9 | 66.7% | 0 | 40.17s | 8,124 | 435 | 41,247 |
| Комбинированный | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5 | 7.3 | 6.0 | 83.3% | 1 | 51.86s | 107,934 | 23,169 | 5,371 | |
| Gemini 3.1 Pro Preview | 9.8 | 10.0 | 100.0% | 0 | 40.39s | 67,910 | 3,687 | 23,111 |
| Парсинг и извлечение данных | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5 | 10.0 | 10.0 | 100.0% | 0 | 3.16s | 10,503 | 312 | 0 | |
| Gemini 3.1 Pro Preview | 10.0 | 10.0 | 100.0% | 0 | 7.72s | 7,265 | 279 | 3,904 |
| Предметно-ориентированное | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5 | 5.3 | 10.0 | 33.3% | 0 | 20.54s | 972 | 12,137 | 1,994 | |
| Gemini 3.1 Pro Preview | 7.7 | 10.0 | 66.7% | 0 | 20.29s | 644 | 18 | 11,704 |
| Общий интеллект | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5 | 4.8 | 3.2 | 33.3% | 1 | 4.32s | 708 | 264 | 0 | |
| Gemini 3.1 Pro Preview | 10.0 | 10.0 | 100.0% | 0 | 11.77s | 490 | 108 | 1,179 |
| Следование инструкциям | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5 | 9.9 | 10.0 | 100.0% | 0 | 3.10s | 909 | 318 | 269 | |
| Gemini 3.1 Pro Preview | 10.0 | 10.0 | 100.0% | 0 | 9.56s | 621 | 72 | 2,236 |
| Решение головоломок | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5 | 7.7 | 10.0 | 66.7% | 0 | 2.98s | 894 | 407 | 121 | |
| Gemini 3.1 Pro Preview | 10.0 | 10.0 | 100.0% | 0 | 6.90s | 570 | 235 | 3,128 |
| Вызов инструментов | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5 | 10.0 | 10.0 | 100.0% | 0 | 10.70s | 12,351 | 433 | 90 | |
| Gemini 3.1 Pro Preview | 10.0 | 10.0 | 100.0% | 0 | 23.15s | 6,018 | 274 | 982 |
| Эрудиция | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5 | 3.0 | 10.0 | 0.0% | 0 | 7.06s | 258 | 917 | 204 | |
| Gemini 3.1 Pro Preview | 10.0 | 10.0 | 100.0% | 0 | 6.27s | 156 | 12 | 1,297 |
Быстрое сравнение
Сменить пару сравнения
Claude Sonnet 5mediumvsMuse Spark 1.3lowGemini 3.1 Pro PreviewmediumvsInklinghighБесплатно доступноGemini 3.1 Pro PreviewmediumvsMuse Glimmer 30BxhighGemini 3.1 Pro PreviewmediumvsMuse Spark 1.1highGemini 3.1 Pro PreviewmediumvsQwen3.8 2.4T A95BlowClaude Sonnet 5mediumvsGrok 4.6highDeepSeek V4 Flash 0731highvsGemini 3.1 Pro PreviewmediumClaude Sonnet 5mediumvsQwen3.8 Max (0902)lowGemini 3.1 Pro PreviewmediumvsGLM 5.2highClaude Sonnet 5mediumvsQwen3.8 2.4T A95BlowClaude Sonnet 5mediumvsMuse Glimmer 30BxhighClaude Sonnet 5mediumvsMuse Spark 1.1low