Gemini 3.1 Flash Lite vs KAT-Coder-Pro V2.5 (default)

KAT-Coder-Pro V2.5 (default) лидирует по среднему баллу: 6.1 vs 5.9. Gemini 3.1 Flash Lite имеет более низкую стоимость benchmark: $0.069 vs $0.742. Gemini 3.1 Flash Lite быстрее: 3.58s vs 24.96s, с долей успешных попыток 47.8% vs 68.1%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-24

Сравниваемые модели

Ранг: #293
Общее число выходных токенов: 11,961
Время ответа (среднее): 3.58s
Общая стоимость: $0.069

Ранг: #284
Общее число выходных токенов: 139,572
Время ответа (среднее): 24.96s
Общая стоимость: $0.742

Рекомендуемая модель Gemini 3.1 Flash Lite

Его балл близок к лучшему здесь (5.9 против 6.1), при этом он примерно в 10.8 раза дешевле, чем KAT-Coder-Pro V2.5 (default).

Подробное сравнение

Метрика	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite none Релиз: 2026-05-08	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default Релиз: 2026-07-14

Метрика	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite none Релиз: 2026-05-08	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default Релиз: 2026-07-14
Оценка	5.9	6.1
Ранг	#293	#284
Надежность	9.9	10.0
Стабильность	8.7	7.1
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	47.8%	68.1%
Нестабильные тесты	4	8
Всего запусков	69	69
Стоимость за результат	0.761	4.419
Общая стоимость	$0.069	$0.742
Цена входа	$0.250 / 1M	$0.740 / 1M
Цена выхода	$1.500 / 1M	$2.960 / 1M
Цена чтения из кэша	$0.025 / 1M	$0.150 / 1M
Цена записи в кэш	$0.084 / 1M	Н/Д
Общее число входных токенов	202,069	98,508
Выходные токены	11,961	8,088
Токены рассуждений	0	131,484
Время ответа (среднее)	3.58s	24.96s
Время ответа (макс.)	43.82s	335.41s
Время ответа (суммарно)	82.24s	574.12s
Параметры	~150B всего (~10B активных)	~700B всего (~72B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#293 Gemini 3.1 Flash Lite

none

Стоимость: $0.001
Время: 4.5s
Токены: 727 tok

#284 KAT-Coder-Pro V2.5

default

Стоимость: $0.010
Время: 29.0s
Токены: 3,439 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	5.0	10.0	0.0%	0		43.82s	84,010	1,238	0
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.90s	0	0	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	7.5	8.4	66.7%	1		1.07s	506	639	0
KAT-Coder-Pro V2.5	8.7	7.9	91.7%	1		4.58s	672	222	3,776

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	5.5	10.0	33.3%	0		938ms	8,128	666	0
KAT-Coder-Pro V2.5	6.1	4.7	66.7%	2		22.52s	7,893	451	21,989

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		9.49s	94,210	8,596	0
KAT-Coder-Pro V2.5	4.1	5.0	33.3%	1		183.08s	70,881	6,356	71,533

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		843ms	7,267	279	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.07s	7,776	288	2,073

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	2.9	7.2	11.1%	1		701ms	656	15	0
KAT-Coder-Pro V2.5	4.1	4.4	44.5%	2		24.90s	780	34	24,649

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	4.0	10.0	0.0%	0		992ms	486	63	0
KAT-Coder-Pro V2.5	4.8	3.2	33.3%	1		5.16s	516	111	956

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		859ms	619	72	0
KAT-Coder-Pro V2.5	9.8	10.0	100.0%	0		2.61s	699	84	1,000

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	6.3	4.8	66.7%	2		720ms	570	150	0
KAT-Coder-Pro V2.5	8.2	7.2	88.9%	1		3.03s	696	256	1,673

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		2.97s	5,457	234	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.93s	8,391	268	835

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		733ms	160	9	0
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		9.91s	204	18	3,000

Сменить пару сравнения