Навигация
AI BENCHY
Сравнить Графики Методология
❤️ Made by XCS
Your ad here

AI BENCHY Compare

OpenAI: GPT-5.4 vs xAI: Grok 4.1 Fast

Сравнить:

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-03-06

Метрика OpenAI: GPT-5.4 none Релиз: 2026-03-05 xAI: Grok 4.1 Fast medium Релиз: 2025-11-19
Средний балл 4.6 6.4
Ранг #44 #28
Тестов верно
Стабильность 8.9 7.8
Стоимость за результат 1.496 0.541
Общая стоимость $0.090 $0.049
Доля успешных попыток 44.4% 71.1%
Нестабильные тесты 2 4
common.totalRuns 45 (15 x 3) 45 (15 x 3)
Выходные токены 1,635 1,056
Токены рассуждений 0 80,419
Время ответа (среднее) 1.46s 27.61s
Время ответа (макс.) 2.89s 121.79s
Время ответа (суммарно) 21.86s 220.87s

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Средний балл vs Время ответа (среднее)

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
OpenAI: GPT-5.4 10.0 7.3 11.1% 1 1.41s 388 0
xAI: Grok 4.1 Fast 10.0 10.0 100.0% 0 5.65s 102 4,021
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
OpenAI: GPT-5.4 10.0 10.0 0.0% 0 2.89s 291 0
xAI: Grok 4.1 Fast 10.0 10.0 100.0% 0 37.64s 261 12,272
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
OpenAI: GPT-5.4 9.9 10.0 100.0% 0 1.04s 222 0
xAI: Grok 4.1 Fast 9.9 10.0 100.0% 0 6.63s 180 5,409
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
OpenAI: GPT-5.4 4.0 7.2 44.4% 1 1.07s 50 0
xAI: Grok 4.1 Fast 4.0 4.4 66.7% 2 121.79s 11 37,657
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
OpenAI: GPT-5.4 5.5 10.0 50.0% 0 1.07s 81 0
xAI: Grok 4.1 Fast 5.5 10.0 50.0% 0 5.30s 55 3,489
Puzzle Solving Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
OpenAI: GPT-5.4 4.0 9.8 33.3% 0 1.52s 357 0
xAI: Grok 4.1 Fast 4.0 7.2 44.4% 1 8.08s 187 6,086
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Выходные токены Токены рассуждений
OpenAI: GPT-5.4 10.0 10.0 100.0% 0 2.75s 246 0
xAI: Grok 4.1 Fast 10.0 1.6 33.3% 1 27.71s 260 11,485

Быстрое сравнение

Сменить пару сравнения