Orodha ya kushindwa kwa Hakufuata maelekezo

Ona ni modeli gani za AI hukutana na Hakufuata maelekezo mara nyingi zaidi ili utambue hatari za utegemevu kabla ya kuchagua. Panga kwa: Muda wa majibu (wastani) ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

523

Modeli iliyoathirika zaidi

Nimble v3 9B 1

Kategoria

Katika kategoria Utatuzi wa mafumbo167 Katika kategoria Akili ya jumla142 Katika kategoria Ufuataji wa maagizo77 Katika kategoria Mbinu za kupinga AI52 Katika kategoria Uandishi wa msimbo50 Katika kategoria Mwito wa zana13 Katika kategoria Kazi za mawakala10 Katika kategoria Uchanganuzi na uchimbaji wa data8 Katika kategoria Mahususi kwa domeni3 Katika kategoria Mchanganyiko1

294/294

Nafasi	Modeli	Kampuni	Idadi ya Hakufuata maelekezo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#427	Grok 4.1 Fast default	X AI	3	0.3	$0.008	3/19	1.62s
Jumla ya majaribio 19 Majaribio yenye makosa 16 Jumla ya gharama $0.008 Muda wa majibu (wastani) 1.62s
#442	Mammoth 1 default	Baseten	1	0.2	$0.000	3/12	1.80s
Jumla ya majaribio 12 Majaribio yenye makosa 9 Jumla ya gharama $0.000 Muda wa majibu (wastani) 1.80s
#340	Inkling Small low	Thinkingmachines	2	0.5	$0.055	9/23	1.99s
Jumla ya majaribio 23 Majaribio yenye makosa 14 Jumla ya gharama $0.055 Muda wa majibu (wastani) 1.99s
#383	Mimo V2 PRO default	Xiaomi	2	0.5	$0.045	7/21	2.27s
Jumla ya majaribio 21 Majaribio yenye makosa 14 Jumla ya gharama $0.045 Muda wa majibu (wastani) 2.27s
#388	Mimo V2 Omni default	Xiaomi	1	0.4	$0.021	8/21	2.44s
Jumla ya majaribio 21 Majaribio yenye makosa 13 Jumla ya gharama $0.021 Muda wa majibu (wastani) 2.44s
#423	MiMo-V2-Flash default	Xiaomi	2	0.3	$0.025	4/21	2.76s
Jumla ya majaribio 21 Majaribio yenye makosa 17 Jumla ya gharama $0.025 Muda wa majibu (wastani) 2.76s
#399	GLM 5 Turbo none	Z.ai	2	0.4	$0.047	6/21	2.82s
Jumla ya majaribio 21 Majaribio yenye makosa 15 Jumla ya gharama $0.047 Muda wa majibu (wastani) 2.82s
#391	Trinity Large Preview default	Arcee AI	3	0.4	$0.008	4/22	2.83s
Jumla ya majaribio 22 Majaribio yenye makosa 18 Jumla ya gharama $0.008 Muda wa majibu (wastani) 2.83s
#379	GLM 5V Turbo none	Z.ai	2	0.5	$0.052	8/21	2.99s
Jumla ya majaribio 21 Majaribio yenye makosa 13 Jumla ya gharama $0.052 Muda wa majibu (wastani) 2.99s
#347	Mistral Small 4 none	Mistral	1	0.5	$0.047	5/23	3.12s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.047 Muda wa majibu (wastani) 3.12s
#306	GPT-5.4 Mini none	OpenAI	3	0.6	$0.170	6/23	3.34s
Jumla ya majaribio 23 Majaribio yenye makosa 17 Jumla ya gharama $0.170 Muda wa majibu (wastani) 3.34s
#341	Ling 3.0 Flash none	Inclusionai	1	0.5	$0.004	6/23	3.40s
Jumla ya majaribio 23 Majaribio yenye makosa 17 Jumla ya gharama $0.004 Muda wa majibu (wastani) 3.40s
#299	DeepSeek V4.1 Flash 1017 none	DeepSeek	1	0.6	$0.055	8/23	3.46s
Jumla ya majaribio 23 Majaribio yenye makosa 15 Jumla ya gharama $0.055 Muda wa majibu (wastani) 3.46s
#293	Gemini 3.1 Flash Lite none	Google	1	0.6	$0.069	9/23	3.58s
Jumla ya majaribio 23 Majaribio yenye makosa 14 Jumla ya gharama $0.069 Muda wa majibu (wastani) 3.58s
#274	Gemini 3.1 Flash Lite Preview none	Google	2	0.6	$0.090	12/23	3.60s
Jumla ya majaribio 23 Majaribio yenye makosa 11 Jumla ya gharama $0.090 Muda wa majibu (wastani) 3.60s

Kushindwa kwa Hakufuata maelekezo

Chuja miundo

Modeli bora kwa Idadi ya Hakufuata maelekezo

Idadi ya Hakufuata maelekezo dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)