Orodha ya kushindwa kwa Hakufuata maelekezo

Ona ni modeli gani za AI hukutana na Hakufuata maelekezo mara nyingi zaidi ili utambue hatari za utegemevu kabla ya kuchagua. Panga kwa: Majaribio sahihi ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

386

Modeli iliyoathirika zaidi

Laguna S 2.1 1

Kategoria

Katika kategoria Utatuzi wa mafumbo128 Katika kategoria Akili ya jumla115 Katika kategoria Ufuataji wa maagizo48 Katika kategoria Mbinu za kupinga AI44 Katika kategoria Uandishi wa msimbo29 Katika kategoria Mwito wa zana12 Katika kategoria Uchanganuzi na uchimbaji wa data7 Katika kategoria Mahususi kwa domeni2 Katika kategoria Mchanganyiko1

215/215

Nafasi	Modeli	Kampuni	Idadi ya Hakufuata maelekezo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#53	Qwen3.8 27B high	Qwen	2	8.4	~$0.287	16/22	167.9s
Jumla ya majaribio 22 Majaribio yenye makosa 6 Jumla ya gharama ~$0.287 Muda wa majibu (wastani) 167.9s
#29	Grok 4.5 high	X AI	1	9.0	$2.252	17/22	72.3s
Jumla ya majaribio 22 Majaribio yenye makosa 5 Jumla ya gharama $2.252 Muda wa majibu (wastani) 72.3s
#201	Grok 4.20 Beta medium	X AI	1	6.0	$0.750	14/18	9.75s
Jumla ya majaribio 18 Majaribio yenye makosa 4 Jumla ya gharama $0.750 Muda wa majibu (wastani) 9.75s
#250	Gemini 3.1 Flash Lite Preview high	Google	1	5.3	$2.310	13/16	68.1s
Jumla ya majaribio 16 Majaribio yenye makosa 3 Jumla ya gharama $2.310 Muda wa majibu (wastani) 68.1s
#26	Gemini 3.5 Flash medium	Google	1	9.0	$0.665	18/22	8.48s
Jumla ya majaribio 22 Majaribio yenye makosa 4 Jumla ya gharama $0.665 Muda wa majibu (wastani) 8.48s

Kushindwa kwa Hakufuata maelekezo

Chuja miundo

Modeli bora kwa Idadi ya Hakufuata maelekezo

Idadi ya Hakufuata maelekezo dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)