Orodha ya kushindwa kwa Hakufuata maelekezo

Ona ni modeli gani za AI hukutana na Hakufuata maelekezo mara nyingi zaidi ili utambue hatari za utegemevu kabla ya kuchagua. Panga kwa: Muda wa majibu (wastani) ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

386

Modeli iliyoathirika zaidi

Nemotron 3 Nano Omni 30b A3b Reasoning 2

Kategoria

Katika kategoria Utatuzi wa mafumbo128 Katika kategoria Akili ya jumla115 Katika kategoria Ufuataji wa maagizo48 Katika kategoria Mbinu za kupinga AI44 Katika kategoria Uandishi wa msimbo29 Katika kategoria Mwito wa zana12 Katika kategoria Uchanganuzi na uchimbaji wa data7 Katika kategoria Mahususi kwa domeni2 Katika kategoria Mchanganyiko1

215/215

Nafasi	Modeli	Kampuni	Idadi ya Hakufuata maelekezo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#260	MiMo-V2.5 none	Xiaomi	1	5.1	$0.025	5/22	4.68s
Jumla ya majaribio 22 Majaribio yenye makosa 17 Jumla ya gharama $0.025 Muda wa majibu (wastani) 4.68s
#297	Hunter Alpha none	OpenRouter	2	4.2	$0.000	6/18	4.70s
Jumla ya majaribio 18 Majaribio yenye makosa 12 Jumla ya gharama $0.000 Muda wa majibu (wastani) 4.70s
#163	Qwen3.5-27B none	Qwen	2	6.6	$0.058	9/22	4.77s
Jumla ya majaribio 22 Majaribio yenye makosa 13 Jumla ya gharama $0.058 Muda wa majibu (wastani) 4.77s
#120	Claude Opus 4.8 none	Anthropic	1	7.3	$1.166	13/22	4.92s
Jumla ya majaribio 22 Majaribio yenye makosa 9 Jumla ya gharama $1.166 Muda wa majibu (wastani) 4.92s
#193	Inkling low	Thinkingmachines	2	6.1	$0.187	10/22	5.11s
Jumla ya majaribio 22 Majaribio yenye makosa 12 Jumla ya gharama $0.187 Muda wa majibu (wastani) 5.11s
#77	Gemini 3.5 Flash Lite medium	Google	1	7.8	$0.272	14/22	5.12s
Jumla ya majaribio 22 Majaribio yenye makosa 8 Jumla ya gharama $0.272 Muda wa majibu (wastani) 5.12s
#185	GPT-5.6 Luna low	OpenAI	1	6.2	$0.051	10/22	5.20s
Jumla ya majaribio 22 Majaribio yenye makosa 12 Jumla ya gharama $0.051 Muda wa majibu (wastani) 5.20s
#196	Gemma 4 31B none	Google	1	6.1	$0.016	9/22	5.41s
Jumla ya majaribio 22 Majaribio yenye makosa 13 Jumla ya gharama $0.016 Muda wa majibu (wastani) 5.41s
#251	Qwen3.6 35B A3B none	Qwen	2	5.3	$0.051	4/22	5.57s
Jumla ya majaribio 22 Majaribio yenye makosa 18 Jumla ya gharama $0.051 Muda wa majibu (wastani) 5.57s
#272	Nemotron 3 Super none	NVIDIA	2	4.8	$0.008	5/22	6.04s
Jumla ya majaribio 22 Majaribio yenye makosa 17 Jumla ya gharama $0.008 Muda wa majibu (wastani) 6.04s
#186	Claude Sonnet 5 none	Anthropic	1	6.1	$0.548	7/22	6.05s
Jumla ya majaribio 22 Majaribio yenye makosa 15 Jumla ya gharama $0.548 Muda wa majibu (wastani) 6.05s
#165	Inkling Small medium	Thinkingmachines	4	6.6	$0.113	10/22	6.30s
Jumla ya majaribio 22 Majaribio yenye makosa 12 Jumla ya gharama $0.113 Muda wa majibu (wastani) 6.30s
#98	GPT 5.3 Chat none	OpenAI	2	7.5	$0.533	13/22	6.56s
Jumla ya majaribio 22 Majaribio yenye makosa 9 Jumla ya gharama $0.533 Muda wa majibu (wastani) 6.56s
#228	Gemma 4 26B A4B none	Google	2	5.6	$0.015	9/22	7.58s
Jumla ya majaribio 22 Majaribio yenye makosa 13 Jumla ya gharama $0.015 Muda wa majibu (wastani) 7.58s
#113	Claude Sonnet 4.6 none	Anthropic	1	7.3	$0.661	12/22	7.67s
Jumla ya majaribio 22 Majaribio yenye makosa 10 Jumla ya gharama $0.661 Muda wa majibu (wastani) 7.67s

Kushindwa kwa Hakufuata maelekezo

Chuja miundo

Modeli bora kwa Idadi ya Hakufuata maelekezo

Idadi ya Hakufuata maelekezo dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)