Claude Haiku 5.5 (max) vs GPT-6.1 Sol (low)

GPT-6.1 Sol (low) лидирует по среднему баллу: 9.6 vs 8.5. GPT-6.1 Sol (low) имеет более низкую стоимость benchmark: $0.460 vs $0.509. GPT-6.1 Sol (low) быстрее: 7.15s vs 61.71s, с долей успешных попыток 85.5% vs 92.8%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-07

Сравниваемые модели

Ранг: #70
Общее число выходных токенов: 919,699
Время ответа (среднее): 61.71s
Общая стоимость: $0.509

Ранг: #16
Общее число выходных токенов: 13,138
Время ответа (среднее): 7.15s
Общая стоимость: $0.460

Рекомендуемая модель GPT-6.1 Sol (low)

Здесь у него лучший балл (9.6), и он отвечает примерно в 8.6 раза быстрее, чем Claude Haiku 5.5 (max).

Подробное сравнение

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 max Релиз: 2026-10-07	GPT-6.1 Sol GPT-6.1 Sol low Релиз: 2026-09-29

Метрика	Claude Haiku 5.5 Claude Haiku 5.5 max Релиз: 2026-10-07	GPT-6.1 Sol GPT-6.1 Sol low Релиз: 2026-09-29
Оценка	8.5	9.6
Ранг	#70	#16
Надежность	10.0	10.0
Стабильность	9.6	9.6
Попытки	69/69	69/69
Тестов верно
Доля успешных попыток	85.5%	92.8%
Нестабильные тесты	1	1
Всего запусков	69	69
Стоимость за результат	2.677	2.187
Общая стоимость	$0.509	$0.460
Цена входа	$0.100 / 1M	$2.000 / 1M
Цена выхода	$0.500 / 1M	$10.000 / 1M
Цена чтения из кэша	$0.010 / 1M	$0.100 / 1M
Цена записи в кэш	$0.125 / 1M	$2.500 / 1M
Общее число входных токенов	487,516	163,900
Выходные токены	10,212	4,958
Токены рассуждений	909,487	8,180
Время ответа (среднее)	61.71s	7.15s
Время ответа (макс.)	288.94s	46.57s
Время ответа (суммарно)	1419.40s	164.47s
Параметры	~50B	~2T всего (~150B активных)
Доступность	Закрытая модель	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#70 Claude Haiku 5.5

max

OpenRouter returned no showcase content (finish_reason: error).

Стоимость: $0.000
Время: 164.5s
Токены: 0 tok

#16 GPT-6.1 Sol

low

Стоимость: $0.028
Время: 44.6s
Токены: 2,881 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	4.7	1.6	66.7%	1		93.30s	349,997	2,345	42,315
GPT-6.1 Sol	10.0	10.0	100.0%	0		46.57s	85,882	798	461

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		5.52s	858	401	10,159
GPT-6.1 Sol	10.0	10.0	100.0%	0		2.14s	606	147	226

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		55.87s	10,608	532	125,988
GPT-6.1 Sol	10.0	10.0	100.0%	0		4.48s	7,302	388	1,286

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		148.38s	99,980	4,909	215,518
GPT-6.1 Sol	10.0	10.0	100.0%	0		10.94s	54,810	2,619	370

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		11.11s	10,515	311	13,476
GPT-6.1 Sol	10.0	10.0	100.0%	0		1.94s	7,140	222	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	5.3	10.0	33.3%	0		228.16s	990	18	426,269
GPT-6.1 Sol	7.7	10.0	66.7%	0		15.39s	732	69	5,195

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		42.22s	714	250	26,083
GPT-6.1 Sol	10.0	10.0	100.0%	0		3.66s	477	114	142

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		6.22s	921	99	5,965
GPT-6.1 Sol	10.0	10.0	100.0%	0		2.21s	660	93	115

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		16.54s	912	716	29,419
GPT-6.1 Sol	10.0	10.0	100.0%	0		2.19s	642	232	88

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	10.0	10.0	100.0%	0		9.86s	11,757	355	3,989
GPT-6.1 Sol	10.0	10.0	100.0%	0		5.53s	5,454	246	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Claude Haiku 5.5	3.0	10.0	0.0%	0		18.80s	264	276	10,306
GPT-6.1 Sol	2.8	1.6	33.3%	1		3.80s	195	30	297

Сменить пару сравнения