Orodha ya Uandishi wa msimbo x Hitilafu ya API

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hitilafu ya API katika Uandishi wa msimbo, ili uone udhaifu haraka. Panga kwa: Majaribio sahihi ↓.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Muse Spark 1.3 1

Sababu za kushindwa

Jibu lisilo sahihi456 Hitilafu ya API64 Hakufuata maelekezo41 Hakuna jibu41 Muundo wa ziada36 Muda umeisha24

Kategoria

Uandishi wa msimbo64 Mchanganyiko49 Mbinu za kupinga AI36 Mwito wa zana33 Kazi za mawakala32 Uchanganuzi na uchimbaji wa data32 Mahususi kwa domeni30 Utatuzi wa mafumbo25 Maarifa ya jumla18 Ufuataji wa maagizo17

39/39

Nafasi	Modeli	Kampuni	Idadi ya Hitilafu ya API	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#67	Muse Spark 1.3 low	Meta	1	0.8	$0.911	2/3	20.9s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.911 Muda wa majibu (wastani) 20.9s
#174	Ember-1 high	Fireworks	1	0.8	$2.405	2/3	72.2s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $2.405 Muda wa majibu (wastani) 72.2s
#147	Qwen3.6 Plus medium	Qwen	1	0.6	$0.554	1/3	153.1s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.554 Muda wa majibu (wastani) 153.1s
#192	Ember-1 max	Fireworks	2	0.5	$3.264	1/3	105.1s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $3.264 Muda wa majibu (wastani) 105.1s
#200	LongCat 2.0 low	Meituan	1	0.7	$0.630	1/3	479.3s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.630 Muda wa majibu (wastani) 479.3s
#220	MiMo-V2.5-Pro medium	Xiaomi	1	0.6	$0.332	1/3	92.1s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.332 Muda wa majibu (wastani) 92.1s
#235	Trinity Large Thinking low	Arcee AI	2	0.5	$0.918	1/3	344.4s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.918 Muda wa majibu (wastani) 344.4s
#268	Ring 2.6 1t medium	Inclusionai	2	0.5	$0.102	1/3	59.6s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.102 Muda wa majibu (wastani) 59.6s
#296	Hy3 preview medium	Tencent	2	0.5	$0.049	1/3	31.4s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.049 Muda wa majibu (wastani) 31.4s
#307	Mimo V2 PRO medium	Xiaomi	1	0.6	$0.333	1/3	94.2s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.333 Muda wa majibu (wastani) 94.2s
#317	MiniMax M2.7 medium	Minimax	1	0.6	$0.326	1/3	101.9s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.326 Muda wa majibu (wastani) 101.9s
#324	Laguna S 2.1 high	Poolside	1	0.5	$0.145	1/3	271.4s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.145 Muda wa majibu (wastani) 271.4s
#331	Hy3 preview high	Tencent	2	0.5	$0.135	1/3	99.8s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.135 Muda wa majibu (wastani) 99.8s
#345	Owl Alpha medium	Openrouter	1	0.5	$0.000	1/3	18.7s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 18.7s
#346	Mimo V2 PRO default	Xiaomi	1	0.5	$0.045	1/3	2.65s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.045 Muda wa majibu (wastani) 2.65s

Chuja miundo

Modeli bora kwa Idadi ya Hitilafu ya API

Idadi ya Hitilafu ya API dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Uandishi wa msimbo: Hitilafu ya API

Chuja miundo

Modeli bora kwa Idadi ya Hitilafu ya API

Idadi ya Hitilafu ya API dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa