Seed-2.0-Code vs Mistral Small 4 (medium)

Seed-2.0-Code лидирует по среднему баллу: 5.3 vs 5.1. Mistral Small 4 (medium) имеет более низкую стоимость benchmark: $0.096 vs $0.151. Mistral Small 4 (medium) быстрее: 10.77s vs 14.67s, с долей успешных попыток 34.9% vs 42.4%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-08-12

Ранг: #219
Общее число выходных токенов: 23,432
Время ответа (среднее): 14.67s
Общая стоимость: $0.151

Ранг: #224
Общее число выходных токенов: 131,824
Время ответа (среднее): 10.77s
Общая стоимость: $0.096

Рекомендуемая модель Mistral Small 4 (medium)

Его балл близок к лучшему здесь (5.1 против 5.3), при этом он примерно в 1.6 раза дешевле, чем Seed-2.0-Code.

Подробное сравнение

Метрика	Seed-2.0-Code Seed-2.0-Code none Релиз: 2026-08-12	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16

Метрика	Seed-2.0-Code Seed-2.0-Code none Релиз: 2026-08-12	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16
Оценка	5.3	5.1
Ранг	#219	#224
Надежность	6.7	10.0
Стабильность	8.1	7.0
Попытки	66/66	66/66
Тестов верно
Доля успешных попыток	34.9%	42.4%
Нестабильные тесты	5	8
Всего запусков	66	66
Стоимость за результат	2.503	1.913
Общая стоимость	$0.151	$0.096
Цена входа	$0.500 / 1M	$0.150 / 1M
Цена выхода	$3.000 / 1M	$0.600 / 1M
Общее число входных токенов	159,740	140,494
Выходные токены	23,432	39,462
Токены рассуждений	0	92,362
Время ответа (среднее)	14.67s	10.77s
Время ответа (макс.)	132.84s	59.15s
Время ответа (суммарно)	322.75s	236.94s
Параметры	~200B всего (~20B активных)	119B всего (6B активных)
Доступность	Закрытая модель	Открытый исходный код

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#219 Seed-2.0-Code

none

Стоимость: $0.030
Время: 140.6s
Токены: 9,924 tok

#224 Mistral Small 4

medium

Стоимость: $0.006
Время: 47.9s
Токены: 9,857 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	3.0	5.9	16.7%	2		5.06s	894	1,435	0
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	3.6	9.8	0.0%	0		13.42s	7,230	505	0
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	3.0	10.0	0.0%	0		78.38s	130,859	19,874	0
Mistral Small 4	3.0	10.0	0.0%	0		32.40s	116,624	17,890	18,384

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	10.0	10.0	100.0%	0		4.53s	8,028	246	0
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	2.9	4.4	22.2%	2		1.92s	939	17	0
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	742	2,621	6,904

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	5.0	10.0	0.0%	0		2.82s	570	247	0
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	6.2	5.8	66.7%	1		1.80s	810	254	0
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	7.7	10.0	66.7%	0		10.04s	858	592	0
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	10.0	10.0	100.0%	0		48.81s	9,288	247	0
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Code	3.0	10.0	0.0%	0		5.36s	264	15	0
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557

Быстрое сравнение

Сменить пару сравнения