Orodha ya kushindwa kwa Hakufuata maelekezo

Ona ni modeli gani za AI hukutana na Hakufuata maelekezo mara nyingi zaidi ili utambue hatari za utegemevu kabla ya kuchagua.

Modeli zilizoonyeshwa

Jumla ya kushindwa

242

Modeli iliyoathirika zaidi

MiniMax M2.7 5

Kategoria

Katika kategoria Utatuzi wa mafumbo88 Katika kategoria Akili ya jumla78 Katika kategoria Mbinu za kupinga AI32 Katika kategoria Ufuataji wa maagizo18 Katika kategoria Uandishi wa msimbo16 Katika kategoria Mwito wa zana8 Katika kategoria Mahususi kwa domeni1 Katika kategoria Mchanganyiko1

138/138

Nafasi	Modeli	Kampuni	Idadi ya Hakufuata maelekezo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#168	MiniMax M2.7 medium	Minimax	5	5.0	$0.163	5/22	41.3s
Jumla ya majaribio 22 Majaribio yenye makosa 17 Jumla ya gharama $0.163 Muda wa majibu (wastani) 41.3s
#150	MiMo-V2.5-Pro none	Xiaomi	4	5.5	$0.068	6/22	4.12s
Jumla ya majaribio 22 Majaribio yenye makosa 16 Jumla ya gharama $0.068 Muda wa majibu (wastani) 4.12s
#181	Grok 4.1 Fast medium	X AI	4	4.7	$0.069	9/19	23.8s
Jumla ya majaribio 19 Majaribio yenye makosa 10 Jumla ya gharama $0.069 Muda wa majibu (wastani) 23.8s
#195	Hy3 preview none	Tencent	4	4.0	$0.003	4/21	12.9s
Jumla ya majaribio 21 Majaribio yenye makosa 17 Jumla ya gharama $0.003 Muda wa majibu (wastani) 12.9s
#197	Granite 4.1 8B none	IBM Granite	4	4.0	$0.007	2/22	1.45s
Jumla ya majaribio 22 Majaribio yenye makosa 20 Jumla ya gharama $0.007 Muda wa majibu (wastani) 1.45s
#21	GPT-5.2 medium	OpenAI	3	8.4	$0.951	14/22	22.6s
Jumla ya majaribio 22 Majaribio yenye makosa 8 Jumla ya gharama $0.951 Muda wa majibu (wastani) 22.6s
#26	GPT-5 Mini medium	OpenAI	3	8.1	$0.237	12/22	27.6s
Jumla ya majaribio 22 Majaribio yenye makosa 10 Jumla ya gharama $0.237 Muda wa majibu (wastani) 27.6s
#56	GPT-5.4 Mini medium	OpenAI	3	7.5	$0.756	12/22	25.9s
Jumla ya majaribio 22 Majaribio yenye makosa 10 Jumla ya gharama $0.756 Muda wa majibu (wastani) 25.9s
#77	Mercury 2 medium	Inception	3	7.0	$0.093	10/22	2.72s
Jumla ya majaribio 22 Majaribio yenye makosa 12 Jumla ya gharama $0.093 Muda wa majibu (wastani) 2.72s
#116	Gemini 3.1 Flash Lite minimal	Google	3	6.1	$0.047	10/22	1.86s
Jumla ya majaribio 22 Majaribio yenye makosa 12 Jumla ya gharama $0.047 Muda wa majibu (wastani) 1.86s
#117	gpt-oss-120b medium	OpenAI	3	6.1	$0.019	9/22	21.9s
Jumla ya majaribio 22 Majaribio yenye makosa 13 Jumla ya gharama $0.019 Muda wa majibu (wastani) 21.9s
#126	Step 3.5 Flash medium	Stepfun	3	6.0	$0.108	11/21	174.2s
Jumla ya majaribio 21 Majaribio yenye makosa 10 Jumla ya gharama $0.108 Muda wa majibu (wastani) 174.2s
#132	GPT-5.4 Mini none	OpenAI	3	5.9	$0.095	6/22	1.53s
Jumla ya majaribio 22 Majaribio yenye makosa 16 Jumla ya gharama $0.095 Muda wa majibu (wastani) 1.53s
#134	Kimi K2.6 none	Moonshot AI	3	5.8	$0.233	7/22	19.6s
Jumla ya majaribio 22 Majaribio yenye makosa 15 Jumla ya gharama $0.233 Muda wa majibu (wastani) 19.6s
#136	Nemotron 3 Super medium	NVIDIA	3	5.7	$0.066	8/22	52.0s
Jumla ya majaribio 22 Majaribio yenye makosa 14 Jumla ya gharama $0.066 Muda wa majibu (wastani) 52.0s

Kushindwa kwa Hakufuata maelekezo

Chuja miundo

Modeli bora kwa Idadi ya Hakufuata maelekezo

Idadi ya Hakufuata maelekezo dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)