AI BENCHY Compare

Anthropic: Claude Sonnet 5 vs Google: Gemini 3.1 Flash Lite

Сводка

Сравнение benchmark Claude Sonnet 5 vs Gemini 3.1 Flash Lite: Gemini 3.1 Flash Lite лидирует по среднему баллу: 6.4 vs 5.7. Gemini 3.1 Flash Lite имеет более низкую стоимость benchmark: $0.028 vs $0.287. Gemini 3.1 Flash Lite быстрее: 1.89s vs 4.74s, с долей успешных попыток 42.9% vs 61.9%.

Рекомендуемая модель: Gemini 3.1 Flash Lite - Здесь у него лучший балл (6.4), при этом он примерно в 10.5 раза дешевле, чем Claude Sonnet 5.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-30

Метрика	Claude Sonnet 5 Claude Sonnet 5 none Релиз: 2026-06-30	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite low Релиз: 2026-05-08

Метрика	Claude Sonnet 5 Claude Sonnet 5 none Релиз: 2026-06-30	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite low Релиз: 2026-05-08
Оценка	5.7	6.4
Ранг	#117	#87
Надежность	10.0	10.0
Стабильность	8.6	9.3
Тестов верно
Доля успешных попыток	42.9%	61.9%
Нестабильные тесты	4	2
Всего запусков	63	63
Стоимость за результат	4.098	0.227
Общая стоимость	$0.287	$0.028
Цена входа	$2.000 / 1M	$0.250 / 1M
Цена выхода	$10.000 / 1M	$1.500 / 1M
Общее число входных токенов	76,797	36,892
Выходные токены	13,325	2,732
Токены рассуждений	0	9,260
Время ответа (среднее)	4.74s	1.89s
Время ответа (макс.)	29.46s	5.66s
Время ответа (суммарно)	99.46s	39.62s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#117 Claude Sonnet 5

none

Стоимость: $0.061
Время: 53.7s
Токены: 6,172 tok

#87 Gemini 3.1 Flash Lite

low

Стоимость: $0.003
Время: 4.0s
Токены: 1,479 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	5.3	10.0	25.0%	0		3.60s	834	1,813	0
Gemini 3.1 Flash Lite	7.3	6.2	75.0%	2		1.84s	500	1,013	1,548

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	4.6	7.9	22.2%	1		3.67s	10,590	1,864	0
Gemini 3.1 Flash Lite	5.5	10.0	33.3%	0		1.53s	8,132	471	1,072

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	3.0	10.0	0.0%	0		29.46s	38,775	6,340	0
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		4.48s	12,870	348	975

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	10.0	10.0	100.0%	0		3.01s	10,503	309	0
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.44s	7,453	291	697

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	5.3	7.2	44.4%	1		3.28s	975	933	0
Gemini 3.1 Flash Lite	5.3	10.0	33.3%	0		1.52s	639	15	1,214

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	4.7	3.1	33.3%	1		2.81s	708	272	0
Gemini 3.1 Flash Lite	4.0	10.0	0.0%	0		1.37s	492	69	438

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	6.4	10.0	50.0%	0		2.58s	909	103	0
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.52s	619	72	760

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	6.0	7.4	55.6%	1		3.22s	894	778	0
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.40s	570	210	1,191

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	10.0	10.0	100.0%	0		6.80s	12,351	522	0
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		5.66s	5,457	234	945

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	3.0	10.0	0.0%	0		4.31s	258	391	0
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		1.46s	160	9	420

Быстрое сравнение

Сменить пару сравнения