Orodha ya kushindwa kwa Hitilafu ya API

Ona ni modeli gani za AI hukutana na Hitilafu ya API mara nyingi zaidi ili utambue hatari za utegemevu kabla ya kuchagua. Panga kwa: Jumla ya gharama ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

414

Modeli iliyoathirika zaidi

North Mini Code 1

Kategoria

Katika kategoria Uandishi wa msimbo65 Katika kategoria Mchanganyiko62 Katika kategoria Mbinu za kupinga AI44 Katika kategoria Mahususi kwa domeni40 Katika kategoria Mwito wa zana39 Katika kategoria Kazi za mawakala36 Katika kategoria Utatuzi wa mafumbo35 Katika kategoria Uchanganuzi na uchimbaji wa data32 Katika kategoria Ufuataji wa maagizo25 Katika kategoria Maarifa ya jumla19

144/144

Nafasi	Modeli	Kampuni	Idadi ya Hitilafu ya API	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#229	KAT-Coder-Pro V2.5 high	Kwaipilot	1	0.6	$0.506	11/23	21.2s
Jumla ya majaribio 23 Majaribio yenye makosa 12 Jumla ya gharama $0.506 Muda wa majibu (wastani) 21.2s
#210	GPT 5.3 Chat default	OpenAI	2	0.7	$0.533	13/23	6.31s
Jumla ya majaribio 23 Majaribio yenye makosa 10 Jumla ya gharama $0.533 Muda wa majibu (wastani) 6.31s
#413	Grok Build 0.1 none	X AI	3	0.3	$0.547	7/19	28.7s
Jumla ya majaribio 19 Majaribio yenye makosa 12 Jumla ya gharama $0.547 Muda wa majibu (wastani) 28.7s
#163	Qwen3.6 Plus medium	Qwen	1	0.7	$0.554	15/23	57.4s
Jumla ya majaribio 23 Majaribio yenye makosa 8 Jumla ya gharama $0.554 Muda wa majibu (wastani) 57.4s
#221	KAT-Coder-Pro V2.5 low	Kwaipilot	2	0.7	$0.568	11/23	19.4s
Jumla ya majaribio 23 Majaribio yenye makosa 12 Jumla ya gharama $0.568 Muda wa majibu (wastani) 19.4s
#63	DeepSeek V4.1 Flash medium	DeepSeek	1	0.9	$0.591	16/23	32.9s
Jumla ya majaribio 23 Majaribio yenye makosa 7 Jumla ya gharama $0.591 Muda wa majibu (wastani) 32.9s
#180	GPT-5.2 Chat default	OpenAI	2	0.7	$0.594	13/23	7.43s
Jumla ya majaribio 23 Majaribio yenye makosa 10 Jumla ya gharama $0.594 Muda wa majibu (wastani) 7.43s
#62	DeepSeek V4.1 Flash high	DeepSeek	1	0.9	$0.617	16/23	33.3s
Jumla ya majaribio 23 Majaribio yenye makosa 7 Jumla ya gharama $0.617 Muda wa majibu (wastani) 33.3s
#217	LongCat 2.0 low	Meituan	2	0.7	$0.630	10/23	115.0s
Jumla ya majaribio 23 Majaribio yenye makosa 13 Jumla ya gharama $0.630 Muda wa majibu (wastani) 115.0s
#260	KAT-Coder-Pro V2.5 medium	Kwaipilot	2	0.6	$0.669	11/23	23.9s
Jumla ya majaribio 23 Majaribio yenye makosa 12 Jumla ya gharama $0.669 Muda wa majibu (wastani) 23.9s
#266	Beam 1.0 501B A23B high	Reflection	3	0.6	$0.674	11/23	9.03s
Jumla ya majaribio 23 Majaribio yenye makosa 12 Jumla ya gharama $0.674 Muda wa majibu (wastani) 9.03s
#109	Nemotron 3 Ultra medium	NVIDIA	1	0.8	$0.674	14/23	40.3s
Jumla ya majaribio 23 Majaribio yenye makosa 9 Jumla ya gharama $0.674 Muda wa majibu (wastani) 40.3s
#355	Mimo V2 Omni medium	Xiaomi	1	0.5	$0.683	10/21	41.2s
Jumla ya majaribio 21 Majaribio yenye makosa 11 Jumla ya gharama $0.683 Muda wa majibu (wastani) 41.2s
#226	Beam 1.0 501B A23B xhigh	Reflection	3	0.6	$0.688	12/23	9.18s
Jumla ya majaribio 23 Majaribio yenye makosa 11 Jumla ya gharama $0.688 Muda wa majibu (wastani) 9.18s
#245	Qwen3.5-35B-A3B medium	Qwen	1	0.6	$0.716	11/23	111.5s
Jumla ya majaribio 23 Majaribio yenye makosa 12 Jumla ya gharama $0.716 Muda wa majibu (wastani) 111.5s

Kushindwa kwa Hitilafu ya API

Chuja miundo

Modeli bora kwa Idadi ya Hitilafu ya API

Idadi ya Hitilafu ya API dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)