Orodha ya Uandishi wa msimbo x Hitilafu ya API

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hitilafu ya API katika Uandishi wa msimbo, ili uone udhaifu haraka. Panga kwa: Jumla ya gharama ↓.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Ember-1 2

Sababu za kushindwa

Jibu lisilo sahihi456 Hitilafu ya API64 Hakufuata maelekezo41 Hakuna jibu41 Muundo wa ziada36 Muda umeisha24

Kategoria

Uandishi wa msimbo64 Mchanganyiko49 Mbinu za kupinga AI36 Mwito wa zana33 Kazi za mawakala32 Uchanganuzi na uchimbaji wa data32 Mahususi kwa domeni30 Utatuzi wa mafumbo25 Maarifa ya jumla18 Ufuataji wa maagizo17

39/39

Nafasi	Modeli	Kampuni	Idadi ya Hitilafu ya API	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#192	Ember-1 max	Fireworks	2	0.5	$3.264	1/3	105.1s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $3.264 Muda wa majibu (wastani) 105.1s
#174	Ember-1 high	Fireworks	1	0.8	$2.405	2/3	72.2s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $2.405 Muda wa majibu (wastani) 72.2s
#292	Hy4 preview low	Tencent	1	0.5	$1.844	0/3	219.1s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $1.844 Muda wa majibu (wastani) 219.1s
#202	Step 3.7 Flash high	Stepfun	1	0.4	$1.478	0/3	206.2s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $1.478 Muda wa majibu (wastani) 206.2s
#235	Trinity Large Thinking low	Arcee AI	2	0.5	$0.918	1/3	344.4s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.918 Muda wa majibu (wastani) 344.4s
#67	Muse Spark 1.3 low	Meta	1	0.8	$0.911	2/3	20.9s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.911 Muda wa majibu (wastani) 20.9s
#330	Mimo V2 Omni medium	Xiaomi	1	0.3	$0.683	0/3	183.9s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.683 Muda wa majibu (wastani) 183.9s
#200	LongCat 2.0 low	Meituan	1	0.7	$0.630	1/3	479.3s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.630 Muda wa majibu (wastani) 479.3s
#147	Qwen3.6 Plus medium	Qwen	1	0.6	$0.554	1/3	153.1s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.554 Muda wa majibu (wastani) 153.1s
#325	Gemini 3 PRO Preview medium	Google	3	0.3	$0.385	0/3	0ms
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.385 Muda wa majibu (wastani) 0ms
#307	Mimo V2 PRO medium	Xiaomi	1	0.6	$0.333	1/3	94.2s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.333 Muda wa majibu (wastani) 94.2s
#220	MiMo-V2.5-Pro medium	Xiaomi	1	0.6	$0.332	1/3	92.1s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.332 Muda wa majibu (wastani) 92.1s
#317	MiniMax M2.7 medium	Minimax	1	0.6	$0.326	1/3	101.9s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.326 Muda wa majibu (wastani) 101.9s
#324	Laguna S 2.1 high	Poolside	1	0.5	$0.145	1/3	271.4s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.145 Muda wa majibu (wastani) 271.4s
#331	Hy3 preview high	Tencent	2	0.5	$0.135	1/3	99.8s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.135 Muda wa majibu (wastani) 99.8s

Chuja miundo

Modeli bora kwa Idadi ya Hitilafu ya API

Idadi ya Hitilafu ya API dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Uandishi wa msimbo: Hitilafu ya API

Chuja miundo

Modeli bora kwa Idadi ya Hitilafu ya API

Idadi ya Hitilafu ya API dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa