Gemini 3.1 Flash Lite (minimal) vs KAT-Coder-Pro V2.5

KAT-Coder-Pro V2.5 лидирует по среднему баллу: 6.1 vs 5.9. Gemini 3.1 Flash Lite (minimal) имеет более низкую стоимость benchmark: $0.080 vs $0.487. Gemini 3.1 Flash Lite (minimal) быстрее: 3.95s vs 24.96s, с долей успешных попыток 49.3% vs 68.1%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-01

Сравниваемые модели

Ранг: #242
Общее число выходных токенов: 12,875
Время ответа (среднее): 3.95s
Общая стоимость: $0.080

Ранг: #236
Общее число выходных токенов: 139,572
Время ответа (среднее): 24.96s
Общая стоимость: $0.487

Рекомендуемая модель Gemini 3.1 Flash Lite (minimal)

Его балл близок к лучшему здесь (5.9 против 6.1), при этом он примерно в 6.2 раза дешевле, чем KAT-Coder-Pro V2.5.

Подробное сравнение

Метрика	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite minimal Релиз: 2026-05-08	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none Релиз: 2026-07-14

Метрика	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite minimal Релиз: 2026-05-08	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none Релиз: 2026-07-14
Оценка	5.9	6.1
Ранг	#242	#236
Надежность	10.0	10.0
Стабильность	8.9	7.1
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	49.3%	68.1%
Нестабильные тесты	3	8
Всего запусков	69	69
Стоимость за результат	0.791	4.419
Общая стоимость	$0.080	$0.487
Цена входа	$0.250 / 1M	$0.740 / 1M
Цена выхода	$1.500 / 1M	$2.960 / 1M
Общее число входных токенов	238,785	98,508
Выходные токены	12,875	139,572
Токены рассуждений	0	0
Время ответа (среднее)	3.95s	24.96s
Время ответа (макс.)	50.03s	335.41s
Время ответа (суммарно)	90.76s	574.12s
Параметры	~150B всего (~10B активных)	~700B всего (~72B активных)
Доступность	Закрытая модель	Закрытая модель

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#242 Gemini 3.1 Flash Lite

minimal

Стоимость: $0.001
Время: 3.7s
Токены: 635 tok

#236 KAT-Coder-Pro V2.5

none

Стоимость: $0.010
Время: 29.0s
Токены: 3,439 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	5.0	10.0	0.0%	0		50.03s	119,709	1,757	0
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.90s	0	0	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	8.3	10.0	75.0%	0		1.10s	500	639	0
KAT-Coder-Pro V2.5	8.7	7.9	91.7%	1		4.58s	672	3,998	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	5.5	10.0	33.3%	0		831ms	8,126	666	0
KAT-Coder-Pro V2.5	6.1	4.7	66.7%	2		22.52s	7,893	22,440	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		7.75s	94,962	8,988	0
KAT-Coder-Pro V2.5	4.1	5.0	33.3%	1		183.08s	70,881	77,889	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.04s	7,552	279	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.07s	7,776	2,361	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	2.9	7.2	11.1%	1		972ms	652	15	0
KAT-Coder-Pro V2.5	4.1	4.4	44.5%	2		24.90s	780	24,683	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	4.0	10.0	0.0%	0		791ms	490	63	0
KAT-Coder-Pro V2.5	4.8	3.2	33.3%	1		5.16s	516	1,067	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		932ms	615	72	0
KAT-Coder-Pro V2.5	9.8	10.0	100.0%	0		2.61s	699	1,084	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	6.0	4.6	66.7%	2		2.15s	564	153	0
KAT-Coder-Pro V2.5	8.2	7.2	88.9%	1		3.03s	696	1,929	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		3.51s	5,457	234	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.93s	8,391	1,103	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		724ms	158	9	0
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		9.91s	204	3,018	0

Быстрое сравнение

Сменить пару сравнения