Навигация
AI BENCHY
Advertise here

AI BENCHY Compare

Mistral: Mistral Small 4 vs Qwen: Qwen3.5-27B

Сводка

Сравнение benchmark Mistral Small 4 vs Qwen3.5-27B: Qwen3.5-27B лидирует по среднему баллу: 5.9 vs 5.1. Mistral Small 4 имеет более низкую стоимость benchmark: $0.007 vs $0.015. Mistral Small 4 быстрее: 630ms vs 1.68s, с долей успешных попыток 27.0% vs 38.1%.

Рекомендуемая модель: Mistral Small 4 - Его балл близок к лучшему здесь (5.1 против 5.9), при этом он примерно в 2.1 раза дешевле, чем Qwen3.5-27B.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-12

Метрика Mistral Small 4 Mistral Small 4 none Релиз: 2026-03-16 Qwen3.5-27B Qwen3.5-27B none Релиз: 2026-02-24
Оценка 5.1 5.9
Ранг #136 #109
Надежность 10.0 10.0
Стабильность 9.5 9.3
Тестов верно
Доля успешных попыток 27.0% 38.1%
Нестабильные тесты 1 2
Всего запусков 63 63
Стоимость за результат 0.139 0.249
Общая стоимость $0.007 $0.015
Цена входа $0.150 / 1M $0.195 / 1M
Цена выхода $0.600 / 1M $1.560 / 1M
Общее число входных токенов 37,309 44,478
Выходные токены 2,201 3,592
Токены рассуждений 0 0
Время ответа (среднее) 630ms 1.68s
Время ответа (макс.) 1.72s 9.39s
Время ответа (суммарно) 13.22s 35.25s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#136 Mistral Small 4

none
Cost
$0.002
Time
10.4s
Tokens
2,370 tok

#109 Qwen3.5-27B

none
Cost
$0.007
Time
42.9s
Tokens
4,273 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 3.4 7.9 16.7% 1 395ms 708 182 0
Qwen3.5-27B 4.8 10.0 25.0% 0 788ms 696 267 0
Программирование Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 3.7 9.7 0.0% 0 901ms 7,636 619 0
Qwen3.5-27B 5.8 10.0 33.3% 0 1.80s 7,913 415 0
Комбинированный Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 3.0 10.0 0.0% 0 1.72s 11,640 496 0
Qwen3.5-27B 2.8 1.6 33.3% 1 9.39s 16,918 1,461 0
Парсинг и извлечение данных Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 10.0 10.0 100.0% 0 822ms 7,914 261 0
Qwen3.5-27B 10.0 10.0 100.0% 0 1.43s 7,794 243 0
Предметно-ориентированное Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 5.3 10.0 33.3% 0 367ms 798 28 0
Qwen3.5-27B 3.0 10.0 0.0% 0 540ms 789 15 0
Общий интеллект Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 4.0 10.0 0.0% 0 729ms 519 205 0
Qwen3.5-27B 5.0 10.0 0.0% 0 2.51s 522 126 0
Следование инструкциям Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 6.5 10.0 50.0% 0 380ms 729 69 0
Qwen3.5-27B 6.3 10.0 50.0% 0 1.03s 711 69 0
Решение головоломок Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 3.1 9.9 0.0% 0 399ms 735 111 0
Qwen3.5-27B 6.7 7.9 55.6% 1 1.38s 714 683 0
Вызов инструментов Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 10.0 10.0 100.0% 0 1.40s 6,420 213 0
Qwen3.5-27B 10.0 10.0 100.0% 0 3.54s 8,211 303 0
Эрудиция Оценка Стабильность Доля успешных попыток Нестабильные тесты Тестов верно Время ответа (среднее) Входные токены Выходные токены Токены рассуждений
Mistral Small 4 3.0 10.0 0.0% 0 397ms 210 17 0
Qwen3.5-27B 3.0 10.0 0.0% 0 599ms 210 10 0

Быстрое сравнение

Сменить пару сравнения