AI BENCHY Compare

Anthropic: Claude Sonnet 5 vs Google: Gemma 4 31B

Сводка

Сравнение benchmark Claude Sonnet 5 vs Gemma 4 31B: Gemma 4 31B лидирует по среднему баллу: 6.3 vs 5.7. Gemma 4 31B имеет более низкую стоимость benchmark: $0.033 vs $0.287. Claude Sonnet 5 быстрее: 4.74s vs 56.55s, с долей успешных попыток 42.9% vs 69.8%.

Рекомендуемая модель: Gemma 4 31B - Здесь у него лучший балл (6.3), при этом он примерно в 8.8 раза дешевле, чем Claude Sonnet 5.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-30

Метрика	Claude Sonnet 5 Claude Sonnet 5 none Релиз: 2026-06-30	Gemma 4 31B Gemma 4 31B medium Релиз: 2026-04-02 Бесплатно доступно

Метрика	Claude Sonnet 5 Claude Sonnet 5 none Релиз: 2026-06-30	Gemma 4 31B Gemma 4 31B medium Релиз: 2026-04-02 Бесплатно доступно
Оценка	5.7	6.3
Ранг	#117	#90
Надежность	10.0	10.0
Стабильность	8.6	9.4
Тестов верно
Доля успешных попыток	42.9%	69.8%
Нестабильные тесты	4	1
Всего запусков	63	63
Стоимость за результат	4.098	0.257
Общая стоимость	$0.287	$0.033
Цена входа	$2.000 / 1M	$0.120 / 1M
Цена выхода	$10.000 / 1M	$0.350 / 1M
Общее число входных токенов	76,797	17,957
Выходные токены	13,325	22,356
Токены рассуждений	0	65,726
Время ответа (среднее)	4.74s	56.55s
Время ответа (макс.)	29.46s	437.40s
Время ответа (суммарно)	99.46s	1074.41s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#117 Claude Sonnet 5

none

Стоимость: $0.061
Время: 53.7s
Токены: 6,172 tok

#90 Gemma 4 31B

medium

Стоимость: $0.002
Время: 45.7s
Токены: 2,696 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	5.3	10.0	25.0%	0		3.60s	834	1,813	0
Gemma 4 31B	10.0	10.0	100.0%	0		12.89s	816	962	2,046

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	4.6	7.9	22.2%	1		3.67s	10,590	1,864	0
Gemma 4 31B	4.3	5.8	22.2%	1		219.76s	5,568	11,098	33,212

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	3.0	10.0	0.0%	0		29.46s	38,775	6,340	0
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	10.0	10.0	100.0%	0		3.01s	10,503	309	0
Gemma 4 31B	10.0	10.0	100.0%	0		21.11s	8,334	1,822	2,951

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	5.3	7.2	44.4%	1		3.28s	975	933	0
Gemma 4 31B	7.7	10.0	66.7%	0		38.48s	876	4,349	8,985

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	4.7	3.1	33.3%	1		2.81s	708	272	0
Gemma 4 31B	10.0	10.0	100.0%	0		9.57s	567	105	888

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	6.4	10.0	50.0%	0		2.58s	909	103	0
Gemma 4 31B	10.0	10.0	100.0%	0		12.76s	777	533	2,035

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	6.0	7.4	55.6%	1		3.22s	894	778	0
Gemma 4 31B	9.9	10.0	100.0%	0		26.91s	801	1,795	5,595

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	10.0	10.0	100.0%	0		6.80s	12,351	522	0
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	3.0	10.0	0.0%	0		4.31s	258	391	0
Gemma 4 31B	3.0	10.0	0.0%	0		90.14s	218	1,692	10,014

Быстрое сравнение

Сменить пару сравнения