AI BENCHY Compare

Anthropic: Claude Sonnet 5 vs Google: Gemini 3.1 Flash Lite

Сводка

Сравнение benchmark Claude Sonnet 5 vs Gemini 3.1 Flash Lite: Gemini 3.1 Flash Lite лидирует по среднему баллу: 6.1 vs 5.7. Gemini 3.1 Flash Lite имеет более низкую стоимость benchmark: $0.013 vs $0.287. Gemini 3.1 Flash Lite быстрее: 1.33s vs 4.74s, с долей успешных попыток 42.9% vs 54.0%.

Рекомендуемая модель: Gemini 3.1 Flash Lite - Здесь у него лучший балл (6.1), при этом он примерно в 22.1 раза дешевле, чем Claude Sonnet 5.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-30

Метрика	Claude Sonnet 5 Claude Sonnet 5 none Релиз: 2026-06-30	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite minimal Релиз: 2026-05-08

Метрика	Claude Sonnet 5 Claude Sonnet 5 none Релиз: 2026-06-30	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite minimal Релиз: 2026-05-08
Оценка	5.7	6.1
Ранг	#117	#96
Надежность	10.0	10.0
Стабильность	8.6	8.8
Тестов верно
Доля успешных попыток	42.9%	54.0%
Нестабильные тесты	4	3
Всего запусков	63	63
Стоимость за результат	4.098	0.130
Общая стоимость	$0.287	$0.013
Цена входа	$2.000 / 1M	$0.250 / 1M
Цена выхода	$10.000 / 1M	$1.500 / 1M
Общее число входных токенов	76,797	36,973
Выходные токены	13,325	2,487
Токены рассуждений	0	0
Время ответа (среднее)	4.74s	1.33s
Время ответа (макс.)	29.46s	4.49s
Время ответа (суммарно)	99.46s	27.91s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#117 Claude Sonnet 5

none

Стоимость: $0.061
Время: 53.7s
Токены: 6,172 tok

#96 Gemini 3.1 Flash Lite

minimal

Стоимость: $0.001
Время: 3.7s
Токены: 635 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	5.3	10.0	25.0%	0		3.60s	834	1,813	0
Gemini 3.1 Flash Lite	8.3	10.0	75.0%	0		1.10s	500	639	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	4.6	7.9	22.2%	1		3.67s	10,590	1,864	0
Gemini 3.1 Flash Lite	5.5	10.0	33.3%	0		831ms	8,126	666	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	3.0	10.0	0.0%	0		29.46s	38,775	6,340	0
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		2.53s	12,870	357	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	10.0	10.0	100.0%	0		3.01s	10,503	309	0
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.04s	7,552	279	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	5.3	7.2	44.4%	1		3.28s	975	933	0
Gemini 3.1 Flash Lite	2.9	7.2	11.1%	1		1.02s	641	15	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	4.7	3.1	33.3%	1		2.81s	708	272	0
Gemini 3.1 Flash Lite	4.0	10.0	0.0%	0		791ms	490	63	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	6.4	10.0	50.0%	0		2.58s	909	103	0
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		932ms	615	72	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	6.0	7.4	55.6%	1		3.22s	894	778	0
Gemini 3.1 Flash Lite	6.0	4.6	66.7%	2		2.15s	564	153	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	10.0	10.0	100.0%	0		6.80s	12,351	522	0
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		3.51s	5,457	234	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 5	3.0	10.0	0.0%	0		4.31s	258	391	0
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		724ms	158	9	0

Быстрое сравнение

Сменить пару сравнения