Orodha ya Mbinu za kupinga AI x Jibu lisilo sahihi

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Jibu lisilo sahihi katika Mbinu za kupinga AI, ili uone udhaifu haraka.

Modeli zilizoonyeshwa

Jumla ya kushindwa

293

Modeli iliyoathirika zaidi

Seed-2.0-Lite 4

Sababu za kushindwa

Jibu lisilo sahihi293 Hakufuata maelekezo33 Muundo wa ziada20 Hitilafu ya API14 Hakuna jibu4 Muda umeisha4

Kategoria

Mahususi kwa domeni421 Mbinu za kupinga AI293 Uandishi wa msimbo259 Utatuzi wa mafumbo204 Maarifa ya jumla172 Mchanganyiko69 Akili ya jumla62 Ufuataji wa maagizo61 Uchanganuzi na uchimbaji wa data41 Mwito wa zana3

140/140

Nafasi	Modeli	Kampuni	Idadi ya Jibu lisilo sahihi	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#211	Laguna Xs.2 none	Poolside	2	3.0	$0.004	0/4	534ms
Jumla ya majaribio 4 Majaribio yenye makosa 4 Jumla ya gharama $0.004 Muda wa majibu (wastani) 534ms
#214	Nemotron 3 Nano Omni 30b A3b Reasoning none	NVIDIA	2	4.8	$0.000	1/4	584ms
Jumla ya majaribio 4 Majaribio yenye makosa 3 Jumla ya gharama $0.000 Muda wa majibu (wastani) 584ms
#5	GPT-5.6 Sol low	OpenAI	1	8.3	$0.971	3/4	2.60s
Jumla ya majaribio 4 Majaribio yenye makosa 1 Jumla ya gharama $0.971 Muda wa majibu (wastani) 2.60s
#8	GPT-5.6 Sol high	OpenAI	1	8.7	$1.234	3/4	3.39s
Jumla ya majaribio 4 Majaribio yenye makosa 1 Jumla ya gharama $1.234 Muda wa majibu (wastani) 3.39s
#16	GPT-5.3-Codex medium	OpenAI	1	8.7	$0.920	3/4	4.16s
Jumla ya majaribio 4 Majaribio yenye makosa 1 Jumla ya gharama $0.920 Muda wa majibu (wastani) 4.16s
#18	Claude Opus 4.7 medium	Anthropic	1	8.3	$1.477	3/4	1.85s
Jumla ya majaribio 4 Majaribio yenye makosa 1 Jumla ya gharama $1.477 Muda wa majibu (wastani) 1.85s
#21	GPT-5.4 medium	OpenAI	1	8.3	$1.533	3/4	4.11s
Jumla ya majaribio 4 Majaribio yenye makosa 1 Jumla ya gharama $1.533 Muda wa majibu (wastani) 4.11s
#24	GPT-5.2 medium	OpenAI	1	6.5	$0.951	2/4	7.81s
Jumla ya majaribio 4 Majaribio yenye makosa 2 Jumla ya gharama $0.951 Muda wa majibu (wastani) 7.81s
#28	Gemini 2.5 Flash medium	Google	1	8.4	$0.643	3/4	6.30s
Jumla ya majaribio 4 Majaribio yenye makosa 1 Jumla ya gharama $0.643 Muda wa majibu (wastani) 6.30s
#29	GPT-5 Mini medium	OpenAI	1	7.1	$0.237	2/4	13.9s
Jumla ya majaribio 4 Majaribio yenye makosa 2 Jumla ya gharama $0.237 Muda wa majibu (wastani) 13.9s
#30	Muse Spark 1.1 high	Meta	1	7.5	$1.694	2/4	8.60s
Jumla ya majaribio 4 Majaribio yenye makosa 2 Jumla ya gharama $1.694 Muda wa majibu (wastani) 8.60s
#34	GPT-5.2 Chat none	OpenAI	1	8.7	$0.604	3/4	3.40s
Jumla ya majaribio 4 Majaribio yenye makosa 1 Jumla ya gharama $0.604 Muda wa majibu (wastani) 3.40s
#38	GPT-5.6 Terra high	OpenAI	1	8.3	$1.055	3/4	2.54s
Jumla ya majaribio 4 Majaribio yenye makosa 1 Jumla ya gharama $1.055 Muda wa majibu (wastani) 2.54s
#39	Seed-2.0-Lite medium	Bytedance Seed	1	8.3	$0.234	3/4	18.0s
Jumla ya majaribio 4 Majaribio yenye makosa 1 Jumla ya gharama $0.234 Muda wa majibu (wastani) 18.0s
#43	GPT-5.6 Terra medium	OpenAI	1	8.3	$0.676	3/4	2.22s
Jumla ya majaribio 4 Majaribio yenye makosa 1 Jumla ya gharama $0.676 Muda wa majibu (wastani) 2.22s

Chuja miundo

Modeli bora kwa Idadi ya Jibu lisilo sahihi

Idadi ya Jibu lisilo sahihi dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Mbinu za kupinga AI: Jibu lisilo sahihi

Chuja miundo

Modeli bora kwa Idadi ya Jibu lisilo sahihi

Idadi ya Jibu lisilo sahihi dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa