Рейтинг Следование инструкциям x Ошибка API

Посмотрите, какие AI-модели чаще всего сталкиваются с Ошибка API в Следование инструкциям, чтобы быстрее находить слабые места.

Показано моделей

Всего сбоев

Наиболее затронутая модель

Причины сбоев

Неверный ответ111 Не соблюдены инструкции73 Ошибка API25 Лишнее форматирование8 Тайм-аут5 Нет ответа2

Категории

Программирование65 Комбинированный62 Анти-ИИ уловки44 Предметно-ориентированное40 Вызов инструментов39 Агентные задачи36 Решение головоломок35 Парсинг и извлечение данных32 Следование инструкциям25 Эрудиция19

21/21

Ранг	Модель	Компания	Количество Ошибка API	Оценка категории	Общая стоимость	Тестов верно	Время ответа (среднее)
#239	Mercury 2.5 medium	Inception	1	0.6	$0.034	1/2	1.07s
Всего тестов 2 Ошибочных тестов 1 Общая стоимость $0.034 Время ответа (среднее) 1.07s
#320	Ember-1 none	Fireworks	1	0.6	$0.786	1/2	31.0s
Всего тестов 2 Ошибочных тестов 1 Общая стоимость $0.786 Время ответа (среднее) 31.0s
#336	Mercury 2.5 low	Inception	1	0.3	$0.020	0/2	972ms
Всего тестов 2 Ошибочных тестов 2 Общая стоимость $0.020 Время ответа (среднее) 972ms
#389	Qwen3.6 Plus Preview medium	Qwen	1	0.7	$0.000	1/2	3.40s
Всего тестов 2 Ошибочных тестов 1 Общая стоимость $0.000 Время ответа (среднее) 3.40s
#398	Xing4.0 29b A4b medium	Xingchen AGI	1	0.4	$0.000	0/2	25.4s
Всего тестов 2 Ошибочных тестов 2 Общая стоимость $0.000 Время ответа (среднее) 25.4s
#412	Xing4.0 29b A4b none	Xingchen AGI	1	0.4	$0.000	0/2	11.7s
Всего тестов 2 Ошибочных тестов 2 Общая стоимость $0.000 Время ответа (среднее) 11.7s

Фильтровать модели