Orodha ya kushindwa kwa Hakufuata maelekezo

Ona ni modeli gani za AI hukutana na Hakufuata maelekezo mara nyingi zaidi ili utambue hatari za utegemevu kabla ya kuchagua. Panga kwa: Majaribio sahihi ↓.

Modeli zilizoonyeshwa

Jumla ya kushindwa

523

Modeli iliyoathirika zaidi

Claude Opus 5.5 1

Kategoria

Katika kategoria Utatuzi wa mafumbo167 Katika kategoria Akili ya jumla142 Katika kategoria Ufuataji wa maagizo77 Katika kategoria Mbinu za kupinga AI52 Katika kategoria Uandishi wa msimbo50 Katika kategoria Mwito wa zana13 Katika kategoria Kazi za mawakala10 Katika kategoria Uchanganuzi na uchimbaji wa data8 Katika kategoria Mahususi kwa domeni3 Katika kategoria Mchanganyiko1

294/294

Nafasi	Modeli	Kampuni	Idadi ya Hakufuata maelekezo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#273	DeepSeek V4 Flash 0731 none	DeepSeek	2	0.6	$0.053	5/23	27.4s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.053 Muda wa majibu (wastani) 27.4s
#320	Ling 3.1 Flash none	Inclusionai	5	0.5	$0.000	5/23	15.7s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.000 Muda wa majibu (wastani) 15.7s
#338	Laguna XS 2.1 none	Poolside	1	0.5	$0.020	5/23	4.56s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.020 Muda wa majibu (wastani) 4.56s
#342	Nemotron 3.5 Lightning high	NVIDIA	4	0.5	$0.168	5/23	77.1s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.168 Muda wa majibu (wastani) 77.1s
#346	Mistral Small 4 medium	Mistral	2	0.5	$0.126	5/23	12.7s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.126 Muda wa majibu (wastani) 12.7s
#347	Mistral Small 4 none	Mistral	1	0.5	$0.047	5/23	3.12s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.047 Muda wa majibu (wastani) 3.12s
#350	MiMo-V2.5-Pro none	Xiaomi	4	0.5	$0.135	5/23	6.21s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.135 Muda wa majibu (wastani) 6.21s
#354	MiniMax M2.7 medium	Minimax	5	0.5	$0.326	5/23	50.3s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.326 Muda wa majibu (wastani) 50.3s
#356	GPT-4o-mini default	OpenAI	1	0.5	$0.024	5/23	4.16s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.024 Muda wa majibu (wastani) 4.16s
#359	Inkling Small none	Thinkingmachines	1	0.5	$0.054	5/23	1.45s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.054 Muda wa majibu (wastani) 1.45s
#360	Qwen3 Coder Next default	Qwen	1	0.5	$0.067	5/23	19.7s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.067 Muda wa majibu (wastani) 19.7s
#364	MiMo-V2.5 none	Xiaomi	1	0.5	$0.049	5/23	9.88s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.049 Muda wa majibu (wastani) 9.88s
#369	GLM 4.7 Flash none	Z.ai	1	0.5	$0.027	5/23	13.0s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.027 Muda wa majibu (wastani) 13.0s
#371	Nemotron 3.5 Lightning medium	NVIDIA	3	0.5	$0.195	5/23	81.9s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.195 Muda wa majibu (wastani) 81.9s
#381	Nemotron 3.5 Lightning low	NVIDIA	2	0.5	$0.175	5/23	83.2s
Jumla ya majaribio 23 Majaribio yenye makosa 18 Jumla ya gharama $0.175 Muda wa majibu (wastani) 83.2s

Kushindwa kwa Hakufuata maelekezo

Chuja miundo

Modeli bora kwa Idadi ya Hakufuata maelekezo

Idadi ya Hakufuata maelekezo dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)