コーディング x 指示に従っていないランキング

AI BENCHY カテゴリ別失敗

コーディングで指示に従っていないが起きやすいAIモデルを確認し、弱点を早く見つけられます。

表示モデル数

総失敗数

最も影響を受けたモデル

失敗理由

不正解230 API エラー43 タイムアウト23 回答なし18 指示に従っていない16 余分な書式12

カテゴリ

パズル解決82 汎用知能74 反AIトリック31 コーディング16 指示追従15 ツール呼び出し6 ドメイン特化1 複合1

16/16

順位	モデル	企業	指示に従っていない件数	カテゴリスコア	合計コスト	正解テスト	応答時間（平均）
#184	Qwen3.5-9B medium	Qwen	1	2.9	$0.036	0/3	100.9s
合計テスト数 3 誤答テスト数 3 合計コスト $0.036 応答時間（平均） 100.9s

モデルを絞り込む