Orodha ya Mwito wa zana x Hakufuata maelekezo

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hakufuata maelekezo katika Mwito wa zana, ili uone udhaifu haraka. Panga kwa: Muda wa majibu (wastani) ↓.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Xing4.0 29b A4b 1

Sababu za kushindwa

Hitilafu ya API39 Hakufuata maelekezo13 Mwito wa zana si sahihi11 Jibu lisilo sahihi9 Hakuna jibu3

Kategoria

Utatuzi wa mafumbo166 Akili ya jumla142 Ufuataji wa maagizo77 Mbinu za kupinga AI52 Uandishi wa msimbo50 Mwito wa zana13 Kazi za mawakala10 Uchanganuzi na uchimbaji wa data8 Mahususi kwa domeni3 Mchanganyiko1

13/13

Nafasi	Modeli	Kampuni	Idadi ya Hakufuata maelekezo	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#421	Xing4.0 29b A4b none	Xingchen AGI	1	0.5	$0.000	0/1	24.1s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 24.1s
#386	Nemotron 3 Super none	NVIDIA	1	0.5	$0.016	0/1	16.0s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.016 Muda wa majibu (wastani) 16.0s
#266	Grok 4.20 medium	X AI	1	0.3	$1.246	0/1	13.7s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $1.246 Muda wa majibu (wastani) 13.7s
#355	Grok 4.20 Beta medium	X AI	1	0.3	$0.750	0/1	12.4s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.750 Muda wa majibu (wastani) 12.4s
#351	MiniMax M2.7 medium	Minimax	1	0.5	$0.326	0/1	12.0s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.326 Muda wa majibu (wastani) 12.0s
#119	GPT-5.4 Mini medium	OpenAI	1	0.5	$1.102	0/1	9.62s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $1.102 Muda wa majibu (wastani) 9.62s
#404	Ling 3.0 Tiny default	Inclusionai	1	0.3	$0.000	0/1	3.05s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 3.05s
#157	Inkling Small high	Thinkingmachines	1	0.3	$0.398	0/1	2.91s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.398 Muda wa majibu (wastani) 2.91s
#203	Inkling low	Thinkingmachines	1	0.3	$0.293	0/1	2.57s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.293 Muda wa majibu (wastani) 2.57s
#277	Inkling none	Thinkingmachines	1	0.3	$0.292	0/1	2.50s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.292 Muda wa majibu (wastani) 2.50s
#303	GPT-5.4 Mini none	OpenAI	1	0.3	$0.170	0/1	2.32s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.170 Muda wa majibu (wastani) 2.32s
#356	Inkling Small none	Thinkingmachines	1	0.3	$0.054	0/1	2.31s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.054 Muda wa majibu (wastani) 2.31s
#286	Inkling Small medium	Thinkingmachines	1	0.3	$0.113	0/1	2.12s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.113 Muda wa majibu (wastani) 2.12s

Chuja miundo

Modeli bora kwa Idadi ya Hakufuata maelekezo

Idadi ya Hakufuata maelekezo dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Mwito wa zana: Hakufuata maelekezo

Chuja miundo

Modeli bora kwa Idadi ya Hakufuata maelekezo

Idadi ya Hakufuata maelekezo dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa