Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Opus 4.8 vs Google: Gemini 3.5 Flash

Сводка

Сравнение benchmark Claude Opus 4.8 (medium) vs Gemini 3.5 Flash (low): Gemini 3.5 Flash (low) лидирует по среднему баллу: 9.2 vs 8.8. Gemini 3.5 Flash (low) имеет более низкую стоимость benchmark: $0.349 vs $1.107. Gemini 3.5 Flash (low) быстрее: 3.27s vs 9.72s, с долей успешных попыток 84.1% vs 90.5%.

Рекомендуемая модель: Gemini 3.5 Flash (low) - Здесь у него лучший балл (9.2), при этом он примерно в 3.2 раза дешевле, чем Claude Opus 4.8 (medium).

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-07-10

Метрика Claude Opus 4.8 Claude Opus 4.8 medium Релиз: 2026-05-28 Gemini 3.5 Flash Gemini 3.5 Flash low Релиз: 2026-05-19
Оценка 8.8 9.2
Ранг #15 #8
Надежность 10.0 10.0
Стабильность 9.6 10.0
Тестов верно
Доля успешных попыток 84.1% 90.5%
Нестабильные тесты 1 0
Всего запусков 63 63
Стоимость за результат 6.512 1.834
Общая стоимость $1.107 $0.349
Цена входа $5.000 / 1M $1.500 / 1M
Цена выхода $25.000 / 1M $9.000 / 1M
Общее число входных токенов 61,007 36,938
Выходные токены 26,495 2,033
Токены рассуждений 5,901 30,519
Время ответа (среднее) 9.72s 3.27s
Время ответа (макс.) 38.03s 9.05s
Время ответа (суммарно) 204.19s 68.65s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#15 Claude Opus 4.8

medium
Стоимость
$0.057
Время
23.1s
Токены
2,412 tok

#8 Gemini 3.5 Flash

low
Стоимость
$0.068
Время
39.1s
Токены
7,588 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Claude Opus 4.8 10.0 10.0 100.0% 0 3.95s 834 1,179 478
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.52s 494 209 2,536
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Claude Opus 4.8 10.0 10.0 100.0% 0 15.33s 10,590 9,945 1,381
Gemini 3.5 Flash 7.8 10.0 66.7% 0 6.71s 8,118 458 13,420
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Claude Opus 4.8 9.8 10.0 100.0% 0 38.03s 23,561 5,260 1,588
Gemini 3.5 Flash 10.0 10.0 100.0% 0 6.44s 12,873 351 3,050
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Claude Opus 4.8 7.1 5.6 83.3% 1 12.29s 10,503 481 312
Gemini 3.5 Flash 10.0 10.0 100.0% 0 1.81s 7,548 279 1,164
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Claude Opus 4.8 5.3 10.0 33.3% 0 14.59s 975 7,477 900
Gemini 3.5 Flash 7.7 10.0 66.7% 0 3.39s 633 12 4,538
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Claude Opus 4.8 10.0 10.0 100.0% 0 2.46s 708 237 0
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.27s 486 119 916
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Claude Opus 4.8 10.0 10.0 100.0% 0 3.32s 909 373 320
Gemini 3.5 Flash 9.9 10.0 100.0% 0 1.86s 615 71 1,652
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Claude Opus 4.8 10.0 10.0 100.0% 0 3.95s 894 791 483
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.35s 558 288 2,150
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Claude Opus 4.8 10.0 10.0 100.0% 0 8.96s 11,775 301 225
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.27s 5,457 234 403
Эрудиция Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Claude Opus 4.8 3.0 10.0 0.0% 0 6.14s 258 451 214
Gemini 3.5 Flash 10.0 10.0 100.0% 0 1.88s 156 12 690

Быстрое сравнение

Сменить пару сравнения