Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 2.5 Flash vs OpenAI: GPT-5.4

Сводка

Сравнение benchmark Gemini 2.5 Flash vs GPT-5.4: Gemini 2.5 Flash лидирует по среднему баллу: 6.2 vs 5.8. Gemini 2.5 Flash имеет более низкую стоимость benchmark: $0.016 vs $0.122. Gemini 2.5 Flash быстрее: 875ms vs 1.42s, с долей успешных попыток 46.0% vs 36.5%.

Рекомендуемая модель: Gemini 2.5 Flash - Здесь у него лучший балл (6.2), при этом он примерно в 8.0 раза дешевле, чем GPT-5.4.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-18

Метрика Gemini 2.5 Flash Gemini 2.5 Flash none Релиз: 2025-06-17 GPT-5.4 GPT-5.4 none Релиз: 2026-03-05
Оценка 6.2 5.8
Ранг #93 #112
Надежность 10.0 10.0
Стабильность 9.6 9.2
Тестов верно
Доля успешных попыток 46.0% 36.5%
Нестабильные тесты 1 2
Всего запусков 63 63
Стоимость за результат 0.169 1.740
Общая стоимость $0.016 $0.122
Цена входа $0.300 / 1M $2.500 / 1M
Цена выхода $2.500 / 1M $15.000 / 1M
Общее число входных токенов 35,926 34,212
Выходные токены 1,770 2,417
Токены рассуждений 0 0
Время ответа (среднее) 875ms 1.42s
Время ответа (макс.) 4.39s 2.95s
Время ответа (суммарно) 18.37s 29.87s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#93 Gemini 2.5 Flash

none
Неверный SVG
Стоимость
$0.164
Время
215.5s
Токены
65,659 tok

#112 GPT-5.4

none
Стоимость
$0.026
Время
18.1s
Токены
1,792 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 2.5 Flash 3.0 10.0 0.0% 0 582ms 492 102 0
GPT-5.4 3.2 8.0 8.3% 1 1.21s 606 406 0
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 2.5 Flash 5.5 10.0 33.3% 0 736ms 8,122 483 0
GPT-5.4 5.5 10.0 33.3% 0 1.62s 7,305 516 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 2.5 Flash 3.0 10.0 0.0% 0 4.39s 12,519 366 0
GPT-5.4 3.0 10.0 0.0% 0 2.89s 11,019 291 0
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 2.5 Flash 10.0 10.0 100.0% 0 652ms 7,257 279 0
GPT-5.4 10.0 10.0 100.0% 0 1.04s 7,140 222 0
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 2.5 Flash 5.9 7.2 55.6% 1 495ms 633 12 0
GPT-5.4 5.3 7.2 44.4% 1 1.07s 723 50 0
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 2.5 Flash 5.0 10.0 0.0% 0 615ms 486 78 0
GPT-5.4 4.4 9.9 0.0% 0 1.78s 477 184 0
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 2.5 Flash 10.0 10.0 100.0% 0 590ms 615 72 0
GPT-5.4 6.5 10.0 50.0% 0 1.07s 660 81 0
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 2.5 Flash 7.7 10.0 66.7% 0 604ms 558 132 0
GPT-5.4 5.6 9.8 33.3% 0 1.44s 642 381 0
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 2.5 Flash 10.0 10.0 100.0% 0 1.91s 5,088 234 0
GPT-5.4 10.0 10.0 100.0% 0 2.75s 5,445 246 0
Эрудиция Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Gemini 2.5 Flash 3.0 10.0 0.0% 0 1.15s 156 12 0
GPT-5.4 3.0 10.0 0.0% 0 990ms 195 40 0

Быстрое сравнение

Сменить пару сравнения

North Mini CodemediumБесплатно доступноvsGPT-5.4noneGemini 2.5 FlashnonevsQwen3.5-35B-A3BmediumGemini 2.5 FlashnonevsNemotron 3 SupermediumБесплатно доступноNorth Mini CodemediumБесплатно доступноvsGemini 2.5 FlashnoneGemini 3.1 Flash LiteminimalvsGPT-5.4noneGemini 2.5 FlashnonevsQwen3.6 27BmediumGemini 2.5 FlashnonevsStep 3.5 FlashmediumGemini 2.5 FlashnonevsGPT-5 NanomediumGPT-5.4nonevsQwen3.5-35B-A3BmediumGemma 4 31BmediumБесплатно доступноvsGPT-5.4noneNemotron 3 SupermediumБесплатно доступноvsGPT-5.4noneGemini 2.5 Flashnonevsgpt-oss-120bmediumБесплатно доступно