Рейтинг Программирование x Не соблюдены инструкции

Сбои по категориям AI BENCHY

Посмотрите, какие AI-модели чаще всего сталкиваются с Не соблюдены инструкции в Программирование, чтобы быстрее находить слабые места.

Показано моделей

Всего сбоев

Наиболее затронутая модель

Причины сбоев

Неверный ответ120 Нет ответа18 Не соблюдены инструкции16 Тайм-аут12 Лишнее форматирование7 Ошибка API6

Категории

Решение головоломок84 Общий интеллект74 Анти-ИИ уловки29 Программирование16 Следование инструкциям14 Вызов инструментов6 Комбинированный1 Предметно-ориентированное1

Ранг	Модель	Компания	Количество Не соблюдены инструкции	Оценка категории	Тестов верно	Время ответа (среднее)
#153	Granite 4.1 8B none	IBM Granite	1	5.2	0/2	706ms

Лучшие модели по Количество Не соблюдены инструкции