Ember-1 (low) vs Qwen3.5-27B (medium)

Сравниваемые модели

Рекомендуемая модель Ember-1 (low)

Здесь у него лучший балл (7.5), и он отвечает примерно в 3.7 раза быстрее, чем Qwen3.5-27B (medium).

Метрика	Ember-1 Ember-1 low Релиз: 2026-09-28	Qwen3.5-27B Qwen3.5-27B medium Релиз: 2026-02-24

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

low

medium

Категория:

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	8.2	7.9	83.3%	1		22.18s	1,402	571	613
Qwen3.5-27B	8.7	7.9	91.7%	1		19.75s	672	569	31,505

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	10.0	10.0	100.0%	0		37.91s	8,097	2,518	13,142
Qwen3.5-27B	6.2	7.1	55.6%	1		160.69s	7,895	6,381	89,388

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	6.5	10.0	50.0%	0		51.45s	12,828	381	689
Qwen3.5-27B	7.3	5.8	83.3%	1		595.19s	84,417	7,948	279,132

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	7.3	5.9	83.3%	1		34.82s	6,076	223	778
Qwen3.5-27B	10.0	10.0	100.0%	0		30.26s	7,782	270	16,150

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	2.9	7.2	11.1%	1		56.17s	1,154	234	12,476
Qwen3.5-27B	5.9	7.2	55.6%	1		89.39s	562	157	52,734

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	10.0	10.0	100.0%	0		5.67s	744	139	462
Qwen3.5-27B	6.1	3.1	66.7%	1		101.41s	524	70	23,147

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	6.2	5.8	66.7%	1		32.73s	781	121	466
Qwen3.5-27B	10.0	10.0	100.0%	0		19.66s	699	97	11,638

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	10.0	10.0	100.0%	0		3.27s	1,452	393	595
Qwen3.5-27B	8.2	7.7	77.8%	1		59.60s	696	242	70,096

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	3.0	10.0	0.0%	0		26.43s	0	0	0
Qwen3.5-27B	10.0	10.0	100.0%	0		7.45s	8,193	348	1,323

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Ember-1	3.0	10.0	0.0%	0		30.60s	477	200	3,466
Qwen3.5-27B	3.0	10.0	0.0%	0		85.11s	204	31	23,683

Сменить пару сравнения