Orodha ya Uandishi wa msimbo x Muundo wa ziada

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Muundo wa ziada katika Uandishi wa msimbo, ili uone udhaifu haraka.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

MiMo-V2.6-Pro 2

Sababu za kushindwa

Jibu lisilo sahihi456 Hitilafu ya API64 Hakufuata maelekezo41 Hakuna jibu41 Muundo wa ziada36 Muda umeisha24

Kategoria

Mahususi kwa domeni36 Uandishi wa msimbo36 Mbinu za kupinga AI33 Utatuzi wa mafumbo16 Uchanganuzi na uchimbaji wa data12 Ufuataji wa maagizo8 Mchanganyiko1

33/33

Nafasi	Modeli	Kampuni	Idadi ya Muundo wa ziada	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#211	Grok 4.3 medium	X AI	1	0.6	$0.989	1/3	41.2s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.989 Muda wa majibu (wastani) 41.2s
#215	Solar Pro 4 medium	Upstage	1	0.5	$0.098	1/3	310.4s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.098 Muda wa majibu (wastani) 310.4s
#216	Claude Sonnet 4.6 medium	Anthropic	1	0.6	$2.126	1/3	33.3s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $2.126 Muda wa majibu (wastani) 33.3s
#220	MiMo-V2.5-Pro medium	Xiaomi	1	0.6	$0.332	1/3	92.1s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.332 Muda wa majibu (wastani) 92.1s
#229	Solar Pro 4 high	Upstage	1	0.6	$0.077	1/3	244.7s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.077 Muda wa majibu (wastani) 244.7s
#231	Ling 3.1 Flash low	Inclusionai	1	0.6	$0.000	1/3	107.3s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 107.3s
#232	Claude Opus 4.6 medium	Anthropic	1	0.6	$2.961	1/3	30.1s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $2.961 Muda wa majibu (wastani) 30.1s
#243	Claude Fable 5.1 low	Anthropic	1	0.3	$3.395	0/3	6.75s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $3.395 Muda wa majibu (wastani) 6.75s
#252	Claude Sonnet 4.6 none	Anthropic	1	0.5	$0.661	1/3	5.19s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.661 Muda wa majibu (wastani) 5.19s
#274	Dots 3 Note Preview medium	Dots Studio	1	0.4	$0.000	0/3	309.1s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.000 Muda wa majibu (wastani) 309.1s
#283	Ling 3.1 Flash none	Inclusionai	1	0.5	$0.000	0/3	31.9s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.000 Muda wa majibu (wastani) 31.9s
#305	Nemotron 3.5 Lightning high	NVIDIA	1	0.4	$0.168	0/3	168.4s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.168 Muda wa majibu (wastani) 168.4s
#306	KAT Coder AIR V2.5 high	Kwaipilot	1	0.4	$0.077	0/3	39.1s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.077 Muda wa majibu (wastani) 39.1s
#312	KAT Coder AIR V2.5 medium	Kwaipilot	1	0.4	$0.048	0/3	23.4s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.048 Muda wa majibu (wastani) 23.4s
#318	Dots 3 Note Preview default	Dots Studio	1	0.5	$0.000	0/3	6.12s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.000 Muda wa majibu (wastani) 6.12s

Chuja miundo

Modeli bora kwa Idadi ya Muundo wa ziada

Idadi ya Muundo wa ziada dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Uandishi wa msimbo: Muundo wa ziada

Chuja miundo

Modeli bora kwa Idadi ya Muundo wa ziada

Idadi ya Muundo wa ziada dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa