AI BENCHY Compare

Google: Gemini 3.5 Flash vs OpenAI: GPT-5.4 Mini

Сводка

Сравнение benchmark Gemini 3.5 Flash vs GPT-5.4 Mini: GPT-5.4 Mini лидирует по среднему баллу: 8.0 vs 7.0. GPT-5.4 Mini имеет более низкую стоимость benchmark: $0.526 vs $1.079. Gemini 3.5 Flash быстрее: 9.93s vs 22.34s, с долей успешных попыток 77.8% vs 73.0%.

Рекомендуемая модель: GPT-5.4 Mini - Здесь у него лучший балл (8.0), при этом он примерно в 2.1 раза дешевле, чем Gemini 3.5 Flash.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-12

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash none Релиз: 2026-05-19	GPT-5.4 Mini GPT-5.4 Mini medium Релиз: 2026-03-17

Метрика	Gemini 3.5 Flash Gemini 3.5 Flash none Релиз: 2026-05-19	GPT-5.4 Mini GPT-5.4 Mini medium Релиз: 2026-03-17
Оценка	7.0	8.0
Ранг	#66	#30
Надежность	10.0	10.0
Стабильность	8.9	8.0
Тестов верно
Доля успешных попыток	77.8%	73.0%
Нестабильные тесты	3	5
Всего запусков	63	63
Стоимость за результат	7.190	4.381
Общая стоимость	$1.079	$0.526
Цена входа	$1.500 / 1M	$0.750 / 1M
Цена выхода	$9.000 / 1M	$4.500 / 1M
Общее число входных токенов	13,843	34,116
Выходные токены	117,518	2,181
Токены рассуждений	0	108,937
Время ответа (среднее)	9.93s	22.34s
Время ответа (макс.)	64.36s	138.75s
Время ответа (суммарно)	178.68s	469.20s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#66 Gemini 3.5 Flash

none

Cost: $0.225
Time: 125.5s
Tokens: 25,004 tok

#30 GPT-5.4 Mini

medium

Cost: $0.056
Time: 95.5s
Tokens: 12,464 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.53s	492	5,101	0
GPT-5.4 Mini	8.6	7.9	91.7%	1		4.05s	606	296	2,876

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	8.8	7.8	88.9%	1		34.69s	8,122	75,927	0
GPT-5.4 Mini	8.4	7.4	88.9%	1		57.87s	7,305	467	40,902

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		0ms	0	0	0
GPT-5.4 Mini	10.0	10.0	100.0%	0		17.81s	11,019	317	4,317

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	6.5	10.0	50.0%	0		8.10s	2,781	5,895	0
GPT-5.4 Mini	10.0	10.0	100.0%	0		2.43s	7,140	234	650

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	7.6	7.2	77.8%	1		10.64s	633	17,910	0
GPT-5.4 Mini	4.1	4.4	44.5%	2		65.31s	619	60	43,286

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		3.46s	486	1,620	0
GPT-5.4 Mini	4.5	10.0	0.0%	0		3.72s	477	150	510

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	9.8	10.0	100.0%	0		3.38s	615	3,928	0
GPT-5.4 Mini	9.8	10.0	100.0%	0		2.13s	660	96	1,185

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	10.0	10.0	100.0%	0		3.13s	558	4,640	0
GPT-5.4 Mini	7.8	10.0	66.7%	0		4.37s	642	278	2,443

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	3.0	10.0	0.0%	0		0ms	0	0	0
GPT-5.4 Mini	4.7	1.6	66.7%	1		9.62s	5,453	251	2,594

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.5 Flash	2.8	1.6	33.3%	1		4.87s	156	2,497	0
GPT-5.4 Mini	3.0	10.0	0.0%	0		30.10s	195	32	10,174

Быстрое сравнение

Сменить пару сравнения