AI BENCHY
Advertise here
#67

Claude Sonnet 4.6

Anthropic Релиз: 2026-02-17 Проверено: 2026-08-14 02:03 anthropic/claude-sonnet-4.6::medium
~1T всего (~100B активных)MoEЗакрытая модельОценка
(medium) (none)

Сводка

Claude Sonnet 4.6 набирает 7.8 в AI BENCHY и занимает #67. У модели надежность 10.0, доля успешных попыток 65.2%, общая стоимость $2.126 и среднее время ответа 28.08s.

Сведения о модели

Дата исследования: 2026-08-12

Оценка
Параметры
~1T всего (~100B активных)
Архитектура
MoE
Доступность
Закрытая модель
Лицензия
-

Наиболее обоснованная оценка по открытым данным; поставщик раскрыл не все значения.

Стабильность

9.5

Общее число выходных токенов

120,427

Общее число входных токенов

106,316

Цена входа

$3.000 / 1M

Цена выхода

$15.000 / 1M

Тестов верно

Ошибочных тестов: 8

Доля успешных попыток: 65.2%

Нестабильные тесты

1

Нестабильные тесты имели смешанные результаты между прогонами (как минимум один успех и один провал).

Время ответа (среднее)

28.08s

Время ответа (макс.): 140.96s

Время ответа (суммарно): 421.15s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#67 Claude Sonnet 4.6

medium
Неверный SVG
Стоимость
$0.000
Время
300.0s
Токены
0 tok

История запусков

Проверено Оценка Надежность Тестов верно Общая стоимость Сравнить
2026-08-14 02:03 Повторный тест 7.8 10.0 $2.126 Текущий запуск
2026-07-16 22:27 Добавлен новый тест 7.8 10.0 $2.057 Сравнить
2026-06-04 13:42 Добавлен новый тест 7.4 10.0 $1.418 Сравнить
2026-05-22 00:14 Набор изменён 7.6 10.0 $1.330 Сравнить
2026-04-11 01:44 Первый зафиксированный запуск 8.0 Н/Д $1.161 Сравнить

Этот запуск использовал другой набор бенчмарков. Учитывайте изменения набора при чтении исторической динамики.

Сравнение запусков

ЗапускПокрытие бенчмаркаОценкаСтабильностьНадежностьТестов верноНестабильные тестыОбщее число выходных токеновОбщее число входных токеновОбщая стоимостьВремя ответа (среднее)
2026-08-14 02:03 · Текущий запуск66/66 попыток7.89.510.014/221120,427106,316$2.12628.08s
2026-06-04 13:42 · Добавлен новый тест63/63 попыток7.49.110.013/21284,67349,112$1.41817.06s
Разница+0.5+0.40.0+1-1+35754+57204+$0.708+11013ms

Покрытие бенчмарка различается: 66/66 попыток (Цель: 3 повторов на тест) против 63/63 попыток (Цель: 3 повторов на тест). Итоги и метрики, зависящие от числа повторов, нельзя сравнивать напрямую.

Эти два запуска использовали разные наборы бенчмарков, поэтому различия отражают и изменения модели, и изменения набора.

История цен

Исторические данные о ценах для этой модели из OpenRouter.

Дата Цена входа Цена выхода
2026-08-14 12:51 $3.000 / 1M $15.000 / 1M

Графики

Выберите первую модель, затем нажмите вторую, чтобы открыть страницу сравнения бок о бок.

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Быстрое сравнение

Разбивка по категориям

Категория Оценка Стабильность Тестов верно
Анти-ИИ уловки 6.5 10.0
Программирование 5.7 6.6
Комбинированный 10.0 10.0
Парсинг и извлечение данных 10.0 10.0
Предметно-ориентированное 3.0 10.0
Общий интеллект 10.0 10.0
Следование инструкциям 10.0 10.0
Решение головоломок 10.0 10.0
Вызов инструментов 10.0 10.0
Эрудиция 3.0 10.0

Сравниваемые модели