Orodha ya kushindwa kwa Hakufuata maelekezo

Kushindwa kwa AI BENCHY

Ona ni modeli gani za AI hukutana na Hakufuata maelekezo mara nyingi zaidi ili utambue hatari za utegemevu kabla ya kuchagua. Panga kwa: Muda wa majibu (wastani) ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

180

Modeli iliyoathirika zaidi

Mercury 2 1

Kategoria

Katika kategoria Utatuzi wa mafumbo75 Katika kategoria Akili ya jumla58 Katika kategoria Ufuataji wa maagizo22 Katika kategoria Mbinu za kupinga AI17 Katika kategoria Mwito wa zana6 Katika kategoria Uandishi wa msimbo2

Nafasi	Modeli	Kampuni	Idadi ya Hakufuata maelekezo	Alama	Majaribio sahihi	Muda wa majibu (wastani)
#55	MiMo-V2-Omni none	Xiaomi	2	6.5	8/18	1.99s
#89	GPT-4o-mini none	OpenAI	1	4.9	4/18	2.00s
#69	Kimi K2.6 none	Moonshot AI	3	5.8	7/18	2.05s
#54	Mercury 2 medium	Inception	4	6.5	8/18	2.21s
#65	MiMo-V2-Pro none	Xiaomi	2	6.0	7/18	2.39s
#94	MiMo-V2-Flash none	Xiaomi	1	4.5	3/18	2.79s
#77	GLM 5 Turbo none	Z.ai	2	5.5	6/18	2.94s
#58	GLM 5V Turbo none	Z.ai	2	6.2	8/18	3.10s
#22	Gemini 3.1 Flash Lite Preview low	Google	1	8.1	13/18	3.22s
#59	Qwen3.5-Flash none	Qwen	1	6.2	8/18	3.25s
#74	GLM 4.7 Flash none	Z.ai	2	5.6	5/18	3.35s
#70	Qwen3.5-122B-A10B none	Qwen	1	5.7	6/18	3.69s
#17	Gemini 3.1 Flash Lite Preview medium	Google	1	8.2	13/18	3.74s
#63	Qwen3.5-35B-A3B none	Qwen	2	6.1	7/18	3.82s
#48	Gemma 4 31B none	Google	1	6.9	10/18	4.02s

←

1 2 3 4 5 6

→

Kushindwa kwa Hakufuata maelekezo

Modeli bora kwa Idadi ya Hakufuata maelekezo

Idadi ya Hakufuata maelekezo dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)