AI BENCHY
Advertise here
#74

Claude Opus 4.8

Anthropic Релиз: 2026-05-28 Проверено: 2026-07-16 22:29 anthropic/claude-opus-4.8::none
(medium) (low) (none)

Сводка

Claude Opus 4.8 набирает 7.3 в AI BENCHY и занимает #74. У модели надежность 10.0, доля успешных попыток 63.6%, общая стоимость $1.166 и среднее время ответа 4.91s.

Что делает Claude Opus 4.8 особенной: Сильнее всего модель выделяется в Комбинированный, где занимает #2; самая слабая область — Парсинг и извлечение данных с #15.

Стабильность

9.2

Общее число выходных токенов

16,797

Общее число входных токенов

149,206

Цена входа

$5.000 / 1M

Цена выхода

$25.000 / 1M

Тестов верно

Ошибочных тестов: 9

Доля успешных попыток: 63.6%

Нестабильные тесты

2

Нестабильные тесты имели смешанные результаты между прогонами (как минимум один успех и один провал).

Время ответа (среднее)

4.91s

Время ответа (макс.): 35.03s

Время ответа (суммарно): 108.03s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#74 Claude Opus 4.8

none
Стоимость
$0.053
Время
22.0s
Токены
2,253 tok

История запусков

Проверено Оценка Надежность Тестов верно Общая стоимость Сравнить
2026-07-16 22:29 Добавлен новый тест 7.3 10.0 $1.166 Текущий запуск
2026-06-30 22:01 Повторный тест 7.2 10.0 $0.539 Сравнить
2026-06-04 13:44 Добавлен новый тест 7.0 10.0 $0.539 Сравнить
2026-05-28 17:34 Первый запуск 7.3 10.0 $0.519 Сравнить

Этот запуск использовал другой набор бенчмарков. Учитывайте изменения набора при чтении исторической динамики.

Сравнение запусков

ЗапускОценкаСтабильностьНадежностьТестов верноНестабильные тестыОбщее число выходных токеновОбщее число входных токеновОбщая стоимостьВремя ответа (среднее)
2026-07-16 22:29 · Текущий запуск7.39.210.013/22216,797149,206$1.1664.91s
2026-06-30 22:01 · Повторный тест7.29.210.012/2128,10767,104$0.5393.48s
Разница0.00.00.0+10+8690+82102+$0.628+1434ms

Эти два запуска использовали разные наборы бенчмарков, поэтому различия отражают и изменения модели, и изменения набора.

История цен

Исторические данные о ценах для этой модели из OpenRouter.

Дата Цена входа Цена выхода
2026-06-04 15:40 $5.000 / 1M $25.000 / 1M

Графики

Выберите первую модель, затем нажмите вторую, чтобы открыть страницу сравнения бок о бок.

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Быстрое сравнение

Разбивка по категориям

Категория Оценка Стабильность Тестов верно
Анти-ИИ уловки 6.5 10.0
Программирование 5.5 10.0
Комбинированный 9.8 10.0
Парсинг и извлечение данных 7.3 5.8
Предметно-ориентированное 5.3 7.2
Общий интеллект 10.0 10.0
Следование инструкциям 9.9 10.0
Решение головоломок 7.7 10.0
Вызов инструментов 10.0 10.0
Эрудиция 3.0 10.0

Сравниваемые модели