Ember-1 vs Mistral Small 4 (medium)

Средний балл практически равен: 5.2 vs 5.1. Mistral Small 4 (medium) имеет более низкую стоимость benchmark: $0.097 vs $0.123. Mistral Small 4 (medium) быстрее: 10.80s vs 19.46s, с долей успешных попыток 42.4% vs 43.9%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-09-28

Сравниваемые модели

Ранг: #297
Общее число выходных токенов: 2,664
Время ответа (среднее): 19.46s
Общая стоимость: $0.123

Ранг: #301
Общее число выходных токенов: 133,597
Время ответа (среднее): 10.80s
Общая стоимость: $0.097

Рекомендуемая модель Mistral Small 4 (medium)

Здесь у него лучший балл (5.1), и он отвечает примерно в 1.8 раза быстрее, чем Ember-1.

Подробное сравнение

Метрика	Ember-1 Ember-1 none Релиз: 2026-09-28	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16

Метрика	Ember-1 Ember-1 none Релиз: 2026-09-28	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16
Оценка	5.2	5.1
Ранг	#297	#301
Надежность	8.1	10.0
Стабильность	8.9	7.0
Попытки	66/66	66/66
Тестов верно
Доля успешных попыток	42.4%	43.9%
Нестабильные тесты	3	8
Всего запусков	66	66
Стоимость за результат	1.528	1.923
Общая стоимость	$0.123	$0.097
Цена входа	$3.000 / 1M	$0.150 / 1M
Цена выхода	$15.000 / 1M	$0.600 / 1M
Общее число входных токенов	27,426	140,559
Выходные токены	2,664	40,268
Токены рассуждений	0	93,329
Время ответа (среднее)	19.46s	10.80s
Время ответа (макс.)	93.12s	59.15s
Время ответа (суммарно)	428.04s	237.60s
Параметры	~2.8T всего (~104B активных)	119B всего (6B активных)
Доступность	Закрытая модель	Открытый исходный код

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#297 Ember-1

none

Стоимость: $0.156
Время: 224.6s
Токены: 10,555 tok

#301 Mistral Small 4

medium

Стоимость: $0.006
Время: 47.9s
Токены: 9,857 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	5.2	7.9	41.7%	1		22.37s	796	867	0
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	5.5	10.0	33.3%	0		1.94s	7,485	393	0
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	3.0	10.0	0.0%	0		49.01s	12,162	327	0
Mistral Small 4	3.0	10.0	0.0%	0		32.40s	116,624	17,890	18,384

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	6.4	5.9	66.7%	1		35.25s	4,017	161	0
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	5.3	10.0	33.3%	0		21.61s	804	68	0
Mistral Small 4	5.9	7.2	55.6%	1		6.33s	807	3,427	7,871

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	5.0	10.0	0.0%	0		2.28s	540	160	0
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	6.4	5.8	66.7%	1		31.00s	509	81	0
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	10.0	10.0	100.0%	0		2.54s	840	569	0
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	3.0	10.0	0.0%	0		26.44s	0	0	0
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	3.0	10.0	0.0%	0		1.05s	273	38	0
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557

Быстрое сравнение

Сменить пару сравнения