AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Google: Gemini 3.5 Flash

Сводка

Сравнение benchmark Claude Sonnet 4.6 vs Gemini 3.5 Flash: Claude Sonnet 4.6 лидирует по среднему баллу: 7.8 vs 7.0. Gemini 3.5 Flash имеет более низкую стоимость benchmark: $1.079 vs $1.418. Gemini 3.5 Flash быстрее: 9.93s vs 17.06s, с долей успешных попыток 65.1% vs 77.8%.

Рекомендуемая модель: Claude Sonnet 4.6 - У него самый высокий балл в этом сравнении (7.8) и лучший общий баланс стоимости и времени ответа среди всех 2 моделей.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-07-02

Метрика	Claude Sonnet 4.6 Claude Sonnet 4.6 medium Релиз: 2026-02-17	Gemini 3.5 Flash Gemini 3.5 Flash none Релиз: 2026-05-19

Метрика	Claude Sonnet 4.6 Claude Sonnet 4.6 medium Релиз: 2026-02-17	Gemini 3.5 Flash Gemini 3.5 Flash none Релиз: 2026-05-19
Оценка	7.8	7.0
Ранг	#32	#69
Надежность	10.0	10.0
Стабильность	9.1	8.9
Тестов верно
Доля успешных попыток	65.1%	77.8%
Нестабильные тесты	2	3
Всего запусков	63	63
Стоимость за результат	10.904	7.190
Общая стоимость	$1.418	$1.079
Цена входа	$3.000 / 1M	$1.500 / 1M
Цена выхода	$15.000 / 1M	$9.000 / 1M
Общее число входных токенов	49,112	13,843
Выходные токены	54,703	117,518
Токены рассуждений	29,970	0
Время ответа (среднее)	17.06s	9.93s
Время ответа (макс.)	46.35s	64.36s
Время ответа (суммарно)	221.83s	178.68s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#32 Claude Sonnet 4.6

medium

Неверный SVG

Стоимость: $0.000
Время: 300.0s
Токены: 0 tok

#69 Gemini 3.5 Flash

none

Стоимость: $0.225
Время: 125.5s
Токены: 25,004 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	6.5	10.0	50.0%	0		2.98s	789	1,046	1,093
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.53s	492	5,101	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	5.7	6.6	44.4%	1		33.29s	6,995	16,089	3,686
Gemini 3.5 Flash	8.8	7.8	88.9%	1		34.69s	8,122	75,927	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	10.0	10.0	100.0%	0		46.35s	18,351	5,871	3,962
Gemini 3.5 Flash	3.0	10.0	0.0%	0		0ms	0	0	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	10.0	10.0	100.0%	0		13.90s	8,676	649	742
Gemini 3.5 Flash	6.5	10.0	50.0%	0		8.10s	2,781	5,895	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	2.9	7.2	11.1%	1		0ms	471	25,790	16,919
Gemini 3.5 Flash	7.6	7.2	77.8%	1		10.64s	633	17,910	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	10.0	10.0	100.0%	0		4.94s	564	256	433
Gemini 3.5 Flash	10.0	10.0	100.0%	0		3.46s	486	1,620	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	10.0	10.0	100.0%	0		2.61s	792	318	552
Gemini 3.5 Flash	9.8	10.0	100.0%	0		3.38s	615	3,928	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	10.0	10.0	100.0%	0		5.31s	816	592	646
Gemini 3.5 Flash	10.0	10.0	100.0%	0		3.13s	558	4,640	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	10.0	10.0	100.0%	0		7.48s	11,454	655	351
Gemini 3.5 Flash	3.0	10.0	0.0%	0		0ms	0	0	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Sonnet 4.6	3.0	10.0	0.0%	0		30.09s	204	3,437	1,586
Gemini 3.5 Flash	2.8	1.6	33.3%	1		4.87s	156	2,497	0

Быстрое сравнение

Сменить пару сравнения