Gemini 3.7 Flash (low) vs KAT-Coder-Pro V2.5 (low)

Gemini 3.7 Flash (low) лидирует по среднему баллу: 9.4 vs 6.5. Gemini 3.7 Flash (low) имеет более низкую стоимость benchmark: $0.183 vs $0.568. Gemini 3.7 Flash (low) быстрее: 6.24s vs 19.40s, с долей успешных попыток 95.7% vs 65.2%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-12

Сравниваемые модели

Ранг: #25
Общее число выходных токенов: 38,453
Время ответа (среднее): 6.24s
Общая стоимость: $0.183

Ранг: #204
Общее число выходных токенов: 113,193
Время ответа (среднее): 19.40s
Общая стоимость: $0.568

Рекомендуемая модель Gemini 3.7 Flash (low)

Здесь у него лучший балл (9.4), при этом он примерно в 3.1 раза дешевле, чем KAT-Coder-Pro V2.5 (low).

Подробное сравнение

Метрика	Gemini 3.7 Flash Gemini 3.7 Flash low Релиз: 2026-08-14	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Релиз: 2026-07-14

Метрика	Gemini 3.7 Flash Gemini 3.7 Flash low Релиз: 2026-08-14	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Релиз: 2026-07-14
Оценка	9.4	6.5
Ранг	#25	#204
Надежность	10.0	10.0
Стабильность	9.3	7.1
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	95.7%	65.2%
Нестабильные тесты	2	8
Всего запусков	69	69
Стоимость за результат	0.868	3.636
Общая стоимость	$0.183	$0.568
Цена входа	$0.750 / 1M	$0.740 / 1M
Цена выхода	$3.750 / 1M	$2.960 / 1M
Цена чтения из кэша	$0.075 / 1M	$0.150 / 1M
Цена записи в кэш	$0.042 / 1M	Н/Д
Общее число входных токенов	188,519	87,682
Выходные токены	7,694	7,166
Токены рассуждений	30,759	106,027
Время ответа (среднее)	6.24s	19.40s
Время ответа (макс.)	58.75s	209.15s
Время ответа (суммарно)	143.56s	446.11s
Параметры	~500B всего (~20B активных)	~700B всего (~72B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#25 Gemini 3.7 Flash

low

Стоимость: $0.010
Время: 23.5s
Токены: 5,210 tok

#204 KAT-Coder-Pro V2.5

low

Стоимость: $0.016
Время: 47.6s
Токены: 5,182 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		58.75s	98,197	1,400	0
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.75s	0	0	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.54s	492	99	1,398
KAT-Coder-Pro V2.5	6.9	5.8	75.0%	2		4.20s	672	277	4,228

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	7.6	7.2	77.8%	1		6.20s	8,118	461	11,508
KAT-Coder-Pro V2.5	7.8	10.0	66.7%	0		24.87s	7,893	402	24,945

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		13.00s	66,250	4,873	8,108
KAT-Coder-Pro V2.5	6.4	5.8	66.7%	1		111.87s	60,055	5,393	43,732

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.15s	7,548	278	1,093
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		4.19s	7,776	288	1,917

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	8.2	7.2	88.9%	1		3.09s	642	12	3,029
KAT-Coder-Pro V2.5	3.5	4.4	33.3%	2		22.86s	780	35	21,430

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.76s	486	81	1,043
KAT-Coder-Pro V2.5	4.1	2.7	33.3%	1		2.32s	516	99	412

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.47s	615	72	1,778
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		2.53s	699	83	1,008

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		1.92s	558	166	1,580
KAT-Coder-Pro V2.5	6.4	4.4	77.8%	2		3.11s	696	289	1,820

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		4.10s	5,457	241	160
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		18.45s	8,391	282	834

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Gemini 3.7 Flash	10.0	10.0	100.0%	0		2.92s	156	11	1,062
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		17.06s	204	18	5,701

Сменить пару сравнения

Claude Opus 5highvsGemini 3.7 Flashlow Claude Opus 5mediumvsGemini 3.7 Flashlow KAT-Coder-Pro V2.5lowvsStep 3.7 Flashhigh Mercury 2mediumvsKAT-Coder-Pro V2.5low Claude Sonnet 5.5mediumvsKAT-Coder-Pro V2.5low Claude Opus 5.5highvsGemini 3.7 Flashlow KAT-Coder-Pro V2.5lowvsQwen3.6 35B A3Bmedium Mercury 2.5 PreviewhighvsKAT-Coder-Pro V2.5low KAT-Coder-Pro V2.5lowvsQwen3.7 Flashmedium Mercury 2.5highvsKAT-Coder-Pro V2.5low KAT-Coder-Pro V2.5lowvsGLM 5.2none KAT-Coder-Pro V2.5lowvsGLM 5.1none