コーディング x 指示に従っていないランキング | AI BENCHY

AI BENCHY カテゴリ別失敗

コーディングで指示に従っていないが起きやすいAIモデルを確認し、弱点を早く見つけられます。

表示モデル数

1

総失敗数

16

最も影響を受けたモデル

Gemini 3.5 Flash 1

失敗理由

不正解120 回答なし18 指示に従っていない16 タイムアウト12 余分な書式7 API エラー6

カテゴリ

パズル解決84 汎用知能74 反AIトリック29 コーディング16 指示追従14 ツール呼び出し6 ドメイン特化1 複合1

順位	モデル	企業	指示に従っていない件数	カテゴリスコア	正解テスト	応答時間（平均）
#153	Granite 4.1 8B none	IBM Granite	1	5.2	0/2	706ms

指示に従っていない件数上位モデル

指示に従っていない件数対スコア

応答時間（平均）上位モデル

推定無駄コスト上位モデル