Orodha ya kushindwa kwa Hakufuata maelekezo

Kushindwa kwa AI BENCHY

Ona ni modeli gani za AI hukutana na Hakufuata maelekezo mara nyingi zaidi ili utambue hatari za utegemevu kabla ya kuchagua. Panga kwa: Alama ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

180

Modeli iliyoathirika zaidi

Kategoria

Katika kategoria Utatuzi wa mafumbo75 Katika kategoria Akili ya jumla58 Katika kategoria Ufuataji wa maagizo22 Katika kategoria Mbinu za kupinga AI17 Katika kategoria Mwito wa zana6 Katika kategoria Uandishi wa msimbo2

Nafasi	Modeli	Kampuni	Idadi ya Hakufuata maelekezo	Alama	Majaribio sahihi	Muda wa majibu (wastani)
#67	Qwen3.5-27B none	Qwen	2	5.9	6/18	1.74s
#66	GPT-5.4 none	OpenAI	1	5.9	7/18	1.51s
#65	MiMo-V2-Pro none	Xiaomi	2	6.0	7/18	2.39s
#63	Qwen3.5-35B-A3B none	Qwen	2	6.1	7/18	3.82s
#62	Gemini 2.5 Flash none	Google	1	6.2	7/18	903ms
#60	Gemma 4 26B A4B none	Google	3	6.2	7/18	6.59s
#59	Qwen3.5-Flash none	Qwen	1	6.2	8/18	3.25s
#58	GLM 5V Turbo none	Z.ai	2	6.2	8/18	3.10s
#57	GPT-5 Nano medium	OpenAI	3	6.3	7/18	44.1s
#56	Grok 4.20 Multi Agent Beta medium	X AI	4	6.4	7/18	9.80s
#55	MiMo-V2-Omni none	Xiaomi	2	6.5	8/18	1.99s
#54	Mercury 2 medium	Inception	4	6.5	8/18	2.21s
#52	Grok 4.1 Fast medium	X AI	4	6.7	9/18	23.9s
#51	Nemotron 3 Super medium	NVIDIA	4	6.7	9/18	19.1s
#50	Hunter Alpha medium	OpenRouter	2	6.7	8/18	10.3s

←

1 2 3 4 5 6

→

Kushindwa kwa Hakufuata maelekezo