AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs Google: Gemma 4 31B

Сводка

Сравнение benchmark Seed-2.0-Lite vs Gemma 4 31B: Gemma 4 31B лидирует по среднему баллу: 6.3 vs 6.2. Seed-2.0-Lite имеет более низкую стоимость benchmark: $0.019 vs $0.033. Seed-2.0-Lite быстрее: 2.49s vs 56.55s, с долей успешных попыток 46.0% vs 69.8%.

Рекомендуемая модель: Seed-2.0-Lite - Его балл близок к лучшему здесь (6.2 против 6.3), при этом он примерно в 1.8 раза дешевле, чем Gemma 4 31B.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-12

Метрика	Seed-2.0-Lite Seed-2.0-Lite none Релиз: 2026-02-14	Gemma 4 31B Gemma 4 31B medium Релиз: 2026-04-02 Бесплатно доступно

Метрика	Seed-2.0-Lite Seed-2.0-Lite none Релиз: 2026-02-14	Gemma 4 31B Gemma 4 31B medium Релиз: 2026-04-02 Бесплатно доступно
Оценка	6.2	6.3
Ранг	#93	#87
Надежность	10.0	10.0
Стабильность	8.4	9.4
Тестов верно
Доля успешных попыток	46.0%	69.8%
Нестабильные тесты	4	1
Всего запусков	63	63
Стоимость за результат	0.228	0.257
Общая стоимость	$0.019	$0.033
Цена входа	$0.250 / 1M	$0.120 / 1M
Цена выхода	$2.000 / 1M	$0.350 / 1M
Общее число входных токенов	46,573	17,957
Выходные токены	3,259	22,356
Токены рассуждений	0	65,726
Время ответа (среднее)	2.49s	56.55s
Время ответа (макс.)	6.70s	437.40s
Время ответа (суммарно)	52.26s	1074.41s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#93 Seed-2.0-Lite

none

Cost: $0.005
Time: 83.8s
Tokens: 2,311 tok

#87 Gemma 4 31B

medium

Cost: $0.002
Time: 45.7s
Tokens: 2,696 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Lite	3.0	5.9	16.7%	2		2.43s	894	709	0
Gemma 4 31B	10.0	10.0	100.0%	0		12.89s	816	962	2,046

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Lite	5.6	10.0	33.3%	0		2.83s	8,215	410	0
Gemma 4 31B	4.3	5.8	22.2%	1		219.76s	5,568	11,098	33,212

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Lite	3.0	10.0	0.0%	0		6.59s	16,215	498	0
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Lite	10.0	10.0	100.0%	0		1.82s	8,538	246	0
Gemma 4 31B	10.0	10.0	100.0%	0		21.11s	8,334	1,822	2,951

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Lite	3.6	7.2	22.2%	1		1.33s	939	17	0
Gemma 4 31B	7.7	10.0	66.7%	0		38.48s	876	4,349	8,985

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Lite	10.0	10.0	100.0%	0		3.45s	570	294	0
Gemma 4 31B	10.0	10.0	100.0%	0		9.57s	567	105	888

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Lite	10.0	10.0	100.0%	0		1.06s	810	73	0
Gemma 4 31B	10.0	10.0	100.0%	0		12.76s	777	533	2,035

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Lite	5.3	7.2	44.4%	1		2.78s	858	709	0
Gemma 4 31B	9.9	10.0	100.0%	0		26.91s	801	1,795	5,595

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Lite	10.0	10.0	100.0%	0		3.94s	9,270	292	0
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Seed-2.0-Lite	3.0	10.0	0.0%	0		1.96s	264	11	0
Gemma 4 31B	3.0	10.0	0.0%	0		90.14s	218	1,692	10,014

Быстрое сравнение

Сменить пару сравнения