Seed-2.0-Code vs Mistral Small 4 (medium)

Seed-2.0-Code лидирует по среднему баллу: 5.3 vs 5.1. Mistral Small 4 (medium) имеет более низкую стоимость benchmark: $0.097 vs $0.151. Mistral Small 4 (medium) быстрее: 10.80s vs 14.67s, с долей успешных попыток 36.4% vs 43.9%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-09-24

Сравниваемые модели

Ранг: #288
Общее число выходных токенов: 23,433
Время ответа (среднее): 14.67s
Общая стоимость: $0.151

Ранг: #297
Общее число выходных токенов: 133,597
Время ответа (среднее): 10.80s
Общая стоимость: $0.097

Рекомендуемая модель Mistral Small 4 (medium)

Его балл близок к лучшему здесь (5.1 против 5.3), при этом он примерно в 1.6 раза дешевле, чем Seed-2.0-Code.

Подробное сравнение

Метрика	Seed-2.0-Code Seed-2.0-Code none Релиз: 2026-08-12	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16

Метрика	Seed-2.0-Code Seed-2.0-Code none Релиз: 2026-08-12	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16
Оценка	5.3	5.1
Ранг	#288	#297
Надежность	8.6	10.0
Стабильность	8.1	7.0
Попытки	66/66	66/66
Тестов верно
Доля успешных попыток	36.4%	43.9%
Нестабильные тесты	5	8
Всего запусков	66	66
Стоимость за результат	2.503	1.923
Общая стоимость	$0.151	$0.097
Цена входа	$0.500 / 1M	$0.150 / 1M
Цена выхода	$3.000 / 1M	$0.600 / 1M
Общее число входных токенов	159,749	140,559
Выходные токены	23,433	40,268
Токены рассуждений	0	93,329
Время ответа (среднее)	14.67s	10.80s
Время ответа (макс.)	132.84s	59.15s
Время ответа (суммарно)	322.71s	237.60s
Параметры	~200B всего (~20B активных)	119B всего (6B активных)
Доступность	Закрытая модель	Открытый исходный код

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 Seed-2.0-Code

none

Стоимость: $0.030
Время: 140.6s
Токены: 9,924 tok

#297 Mistral Small 4

medium

Стоимость: $0.006
Время: 47.9s
Токены: 9,857 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	3.0	5.9	16.7%	2		5.06s	894	1,435	0
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	3.6	9.8	0.0%	0		13.42s	7,230	505	0
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	3.0	10.0	0.0%	0		78.38s	130,859	19,874	0
Mistral Small 4	3.0	10.0	0.0%	0		32.40s	116,624	17,890	18,384

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	10.0	10.0	100.0%	0		4.53s	8,028	246	0
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	3.5	4.4	33.3%	2		1.91s	948	18	0
Mistral Small 4	5.9	7.2	55.6%	1		6.33s	807	3,427	7,871

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	5.0	10.0	0.0%	0		2.82s	570	247	0
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	6.2	5.8	66.7%	1		1.80s	810	254	0
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	7.7	10.0	66.7%	0		10.04s	858	592	0
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	10.0	10.0	100.0%	0		48.81s	9,288	247	0
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	3.0	10.0	0.0%	0		5.36s	264	15	0
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557

Быстрое сравнение

Сменить пару сравнения