Рейтинг Предметно-ориентированное x Ошибка API

Сбои по категориям AI BENCHY

Посмотрите, какие AI-модели чаще всего сталкиваются с Ошибка API в Предметно-ориентированное, чтобы быстрее находить слабые места.

Показано моделей

Всего сбоев

Наиболее затронутая модель

Причины сбоев

Неверный ответ314 Тайм-аут34 Лишнее форматирование12 Ошибка API6 Нет ответа5 Не соблюдены инструкции1

Категории

Программирование43 Парсинг и извлечение данных16 Вызов инструментов15 Анти-ИИ уловки13 Комбинированный13 Решение головоломок13 Общий интеллект12 Эрудиция12 Предметно-ориентированное6 Следование инструкциям1

Ранг	Модель	Компания	Количество Ошибка API	Оценка категории	Тестов верно	Время ответа (среднее)
#93	Qwen3.6 Plus Preview medium	Qwen	1	3.0	0/3	22.1s
#103	DeepSeek V4 Pro high	DeepSeek	1	2.9	0/3	205.7s
#132	Mistral Small 4 medium	Mistral	1	5.3	1/3	6.11s
#133	DeepSeek V3.2 none	DeepSeek	1	2.9	0/3	4.17s
#156	Hy3 preview none	Tencent	1	3.6	0/3	17.6s
#160	LFM2-24B-A2B none	Liquid	1	5.9	1/3	287ms

Лучшие модели по Количество Ошибка API