Orodha ya Uandishi wa msimbo x Hitilafu ya API

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hitilafu ya API katika Uandishi wa msimbo, ili uone udhaifu haraka. Panga kwa: Muda wa majibu (wastani) ↓.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

LongCat 2.0 1

Sababu za kushindwa

Jibu lisilo sahihi456 Hitilafu ya API64 Hakufuata maelekezo41 Hakuna jibu41 Muundo wa ziada36 Muda umeisha24

Kategoria

Uandishi wa msimbo64 Mchanganyiko49 Mbinu za kupinga AI36 Mwito wa zana33 Kazi za mawakala32 Uchanganuzi na uchimbaji wa data32 Mahususi kwa domeni30 Utatuzi wa mafumbo25 Maarifa ya jumla18 Ufuataji wa maagizo17

39/39

Nafasi	Modeli	Kampuni	Idadi ya Hitilafu ya API	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#200	LongCat 2.0 low	Meituan	1	0.7	$0.630	1/3	479.3s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.630 Muda wa majibu (wastani) 479.3s
#235	Trinity Large Thinking low	Arcee AI	2	0.5	$0.918	1/3	344.4s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.918 Muda wa majibu (wastani) 344.4s
#324	Laguna S 2.1 high	Poolside	1	0.5	$0.145	1/3	271.4s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.145 Muda wa majibu (wastani) 271.4s
#292	Hy4 preview low	Tencent	1	0.5	$1.844	0/3	219.1s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $1.844 Muda wa majibu (wastani) 219.1s
#202	Step 3.7 Flash high	Stepfun	1	0.4	$1.478	0/3	206.2s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $1.478 Muda wa majibu (wastani) 206.2s
#330	Mimo V2 Omni medium	Xiaomi	1	0.3	$0.683	0/3	183.9s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.683 Muda wa majibu (wastani) 183.9s
#147	Qwen3.6 Plus medium	Qwen	1	0.6	$0.554	1/3	153.1s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.554 Muda wa majibu (wastani) 153.1s
#281	Nemotron 3 Super medium	NVIDIA	3	0.3	$0.081	0/3	147.3s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.081 Muda wa majibu (wastani) 147.3s
#350	Ring 2.6 1t default	Inclusionai	2	0.5	$0.026	1/3	143.8s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.026 Muda wa majibu (wastani) 143.8s
#192	Ember-1 max	Fireworks	2	0.5	$3.264	1/3	105.1s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $3.264 Muda wa majibu (wastani) 105.1s
#317	MiniMax M2.7 medium	Minimax	1	0.6	$0.326	1/3	101.9s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.326 Muda wa majibu (wastani) 101.9s
#331	Hy3 preview high	Tencent	2	0.5	$0.135	1/3	99.8s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.135 Muda wa majibu (wastani) 99.8s
#307	Mimo V2 PRO medium	Xiaomi	1	0.6	$0.333	1/3	94.2s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.333 Muda wa majibu (wastani) 94.2s
#382	Command A+ medium	Cohere	3	0.3	$0.064	0/3	93.1s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.064 Muda wa majibu (wastani) 93.1s
#387	Command A+ high	Cohere	3	0.3	$0.079	0/3	92.7s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.079 Muda wa majibu (wastani) 92.7s

Chuja miundo

Modeli bora kwa Idadi ya Hitilafu ya API

Idadi ya Hitilafu ya API dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Uandishi wa msimbo: Hitilafu ya API

Chuja miundo

Modeli bora kwa Idadi ya Hitilafu ya API

Idadi ya Hitilafu ya API dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa