Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Mistral: Mistral Small 4 vs OpenAI: GPT-4o-mini

Сводка

Сравнение benchmark Mistral Small 4 vs GPT-4o-mini: Mistral Small 4 лидирует по среднему баллу: 5.1 vs 5.0. GPT-4o-mini имеет более низкую стоимость benchmark: $0.006 vs $0.068. GPT-4o-mini быстрее: 1.77s vs 9.40s, с долей успешных попыток 44.4% vs 23.8%.

Рекомендуемая модель: GPT-4o-mini - Его балл близок к лучшему здесь (5.0 против 5.1), при этом он примерно в 11.4 раза дешевле, чем Mistral Small 4.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-12

Метрика Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16 GPT-4o-mini GPT-4o-mini none Релиз: 2024-07-18
Оценка 5.1 5.0
Ранг #138 #143
Надежность 10.0 10.0
Стабильность 6.9 9.9
Тестов верно
Доля успешных попыток 44.4% 23.8%
Нестабильные тесты 8 0
Всего запусков 63 63
Стоимость за результат 1.344 0.119
Общая стоимость $0.068 $0.006
Цена входа $0.150 / 1M $0.150 / 1M
Цена выхода $0.600 / 1M $0.600 / 1M
Общее число входных токенов 42,576 31,518
Выходные токены 24,184 1,982
Токены рассуждений 84,678 0
Время ответа (среднее) 9.40s 1.77s
Время ответа (макс.) 59.15s 7.58s
Время ответа (суммарно) 197.39s 24.80s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#138 Mistral Small 4

medium
Cost
$0.006
Time
47.9s
Tokens
9,857 tok

#143 GPT-4o-mini

none
Cost
$0.001
Time
6.6s
Tokens
742 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 708 4,055 4,778
GPT-4o-mini 4.8 10.0 25.0% 0 1.34s 618 186 0
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715
GPT-4o-mini 3.2 9.6 0.0% 0 1.63s 7,314 367 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 18,706 2,612 10,700
GPT-4o-mini 3.0 10.0 0.0% 0 7.58s 8,298 568 0
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 6,171 335 723
GPT-4o-mini 10.0 10.0 100.0% 0 1.27s 7,161 183 0
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 742 2,621 6,904
GPT-4o-mini 3.0 10.0 0.0% 0 637ms 732 15 0
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 519 821 828
GPT-4o-mini 4.0 10.0 0.0% 0 909ms 480 66 0
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 729 540 1,031
GPT-4o-mini 6.3 10.0 50.0% 0 1.11s 666 69 0
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 3.4 9.7 0.0% 0 2.17s 735 1,226 2,632
GPT-4o-mini 3.5 10.0 0.0% 0 1.21s 651 308 0
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 6,420 321 810
GPT-4o-mini 10.0 10.0 100.0% 0 2.51s 5,400 205 0
Эрудиция Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 3.0 10.0 0.0% 0 5.92s 210 18 1,557
GPT-4o-mini 3.0 10.0 0.0% 0 794ms 198 15 0

Быстрое сравнение

Сменить пару сравнения

Mistral Small 4mediumvsMiMo-V2.5noneMistral Small 4mediumvsQwen3.5-9BnoneMistral Small 4mediumvsQwen3 Coder NextnoneCobuddymediumvsGPT-4o-mininoneMistral Small 4mediumvsQwen3.6 35B A3BnoneTrinity Large PreviewnonevsMistral Small 4mediumDeepSeek V3.2nonevsMistral Small 4mediumMistral Small 4mediumvsQwen3.5-122B-A10BnoneMistral Small 4mediumvsGPT-5.4 MininoneMistral Small 4mediumvsGrok 4.20noneMistral Small 4mediumvsGLM 5 TurbononeMistral Small 4mediumvsGLM 4.7 Flashnone