AI BENCHY Compare

Google: Gemma 4 31B vs OpenAI: GPT-5.4 Mini

Сводка

Сравнение benchmark Gemma 4 31B vs GPT-5.4 Mini: Gemma 4 31B лидирует по среднему баллу: 6.3 vs 5.3. Gemma 4 31B имеет более низкую стоимость benchmark: $0.033 vs $0.038. GPT-5.4 Mini быстрее: 1.13s vs 56.55s, с долей успешных попыток 69.8% vs 30.2%.

Рекомендуемая модель: GPT-5.4 Mini - Он дает лучший общий компромисс: конкурентный балл (5.3), быстрее ответ, чем у Gemma 4 31B, и сбалансированная стоимость.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-12

Метрика	Gemma 4 31B Gemma 4 31B medium Релиз: 2026-04-02 Бесплатно доступно	GPT-5.4 Mini GPT-5.4 Mini none Релиз: 2026-03-17

Метрика	Gemma 4 31B Gemma 4 31B medium Релиз: 2026-04-02 Бесплатно доступно	GPT-5.4 Mini GPT-5.4 Mini none Релиз: 2026-03-17
Оценка	6.3	5.3
Ранг	#87	#131
Надежность	10.0	10.0
Стабильность	9.4	8.8
Тестов верно
Доля успешных попыток	69.8%	30.2%
Нестабильные тесты	1	3
Всего запусков	63	63
Стоимость за результат	0.257	0.743
Общая стоимость	$0.033	$0.038
Цена входа	$0.120 / 1M	$0.750 / 1M
Цена выхода	$0.350 / 1M	$4.500 / 1M
Общее число входных токенов	17,957	34,244
Выходные токены	22,356	2,541
Токены рассуждений	65,726	0
Время ответа (среднее)	56.55s	1.13s
Время ответа (макс.)	437.40s	2.52s
Время ответа (суммарно)	1074.41s	23.82s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#87 Gemma 4 31B

medium

Cost: $0.002
Time: 45.7s
Tokens: 2,696 tok

#131 GPT-5.4 Mini

none

Cost: $0.010
Time: 11.7s
Tokens: 2,151 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemma 4 31B	10.0	10.0	100.0%	0		12.89s	816	962	2,046
GPT-5.4 Mini	3.1	8.1	8.3%	1		929ms	606	654	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemma 4 31B	4.3	5.8	22.2%	1		219.76s	5,568	11,098	33,212
GPT-5.4 Mini	5.5	10.0	33.3%	0		913ms	7,305	401	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0
GPT-5.4 Mini	3.0	10.0	0.0%	0		2.52s	11,019	298	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemma 4 31B	10.0	10.0	100.0%	0		21.11s	8,334	1,822	2,951
GPT-5.4 Mini	10.0	10.0	100.0%	0		1.30s	7,140	222	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemma 4 31B	7.7	10.0	66.7%	0		38.48s	876	4,349	8,985
GPT-5.4 Mini	3.5	4.4	33.3%	2		937ms	723	88	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemma 4 31B	10.0	10.0	100.0%	0		9.57s	567	105	888
GPT-5.4 Mini	4.8	10.0	0.0%	0		1.82s	477	174	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemma 4 31B	10.0	10.0	100.0%	0		12.76s	777	533	2,035
GPT-5.4 Mini	6.3	10.0	50.0%	0		728ms	660	101	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemma 4 31B	9.9	10.0	100.0%	0		26.91s	801	1,795	5,595
GPT-5.4 Mini	5.4	10.0	33.3%	0		836ms	642	305	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0
GPT-5.4 Mini	3.0	10.0	0.0%	0		2.32s	5,477	255	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemma 4 31B	3.0	10.0	0.0%	0		90.14s	218	1,692	10,014
GPT-5.4 Mini	3.0	10.0	0.0%	0		1.33s	195	43	0

Быстрое сравнение

Сменить пару сравнения