Рейтинг Следование инструкциям x Тайм-аут

Посмотрите, какие AI-модели чаще всего сталкиваются с Тайм-аут в Следование инструкциям, чтобы быстрее находить слабые места.

Показано моделей

Всего сбоев

Наиболее затронутая модель

Причины сбоев

Неверный ответ82 Не соблюдены инструкции48 Лишнее форматирование7 Тайм-аут5 Нет ответа2 Ошибка API2

Категории

Предметно-ориентированное41 Программирование29 Решение головоломок11 Комбинированный9 Анти-ИИ уловки6 Следование инструкциям5 Общий интеллект4 Парсинг и извлечение данных2 Эрудиция1

5/5

Ранг	Модель	Компания	Количество Тайм-аут	Оценка категории	Общая стоимость	Тестов верно	Время ответа (среднее)
#242	Laguna XS 2.1 none	Poolside	1	3.8	$0.008	0/2	364ms
Всего тестов 2 Ошибочных тестов 2 Общая стоимость $0.008 Время ответа (среднее) 364ms
#249	Granite 4.2 8B medium	IBM Granite	1	3.8	$0.009	0/2	36.9s
Всего тестов 2 Ошибочных тестов 2 Общая стоимость $0.009 Время ответа (среднее) 36.9s
#253	Granite 4.2 8B low	IBM Granite	1	3.0	$0.012	0/2	75.8s
Всего тестов 2 Ошибочных тестов 2 Общая стоимость $0.012 Время ответа (среднее) 75.8s
#282	Granite 4.2 8B high	IBM Granite	1	6.4	$0.084	1/2	87.5s
Всего тестов 2 Ошибочных тестов 1 Общая стоимость $0.084 Время ответа (среднее) 87.5s
#291	Granite 4.2 8B none	IBM Granite	1	3.0	$0.026	0/2	79.5s
Всего тестов 2 Ошибочных тестов 2 Общая стоимость $0.026 Время ответа (среднее) 79.5s

Фильтровать модели