Orodha ya Uandishi wa msimbo x Muda umeisha

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Muda umeisha katika Uandishi wa msimbo, ili uone udhaifu haraka.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

GLM 5.2 2

Sababu za kushindwa

Jibu lisilo sahihi337 Hitilafu ya API51 Hakuna jibu39 Muda umeisha27 Hakufuata maelekezo25 Muundo wa ziada25

Kategoria

Mahususi kwa domeni40 Uandishi wa msimbo27 Mchanganyiko5 Utatuzi wa mafumbo5 Akili ya jumla4 Mbinu za kupinga AI4 Maarifa ya jumla1 Uchanganuzi na uchimbaji wa data1 Ufuataji wa maagizo1

24/24

Nafasi	Modeli	Kampuni	Idadi ya Muda umeisha	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#55	GLM 5.2 high	Z.ai	2	6.4	$1.188	1/3	73.0s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $1.188 Muda wa majibu (wastani) 73.0s
#166	Gemma 4 31B medium	Google	2	4.3	$0.100	0/3	219.8s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.100 Muda wa majibu (wastani) 219.8s
#268	GLM 4.7 Flash medium	Z.ai	2	3.2	$0.168	0/3	55.3s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.168 Muda wa majibu (wastani) 55.3s
#62	Qwen3.7 Plus medium	Qwen	1	6.1	$0.277	1/3	108.6s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.277 Muda wa majibu (wastani) 108.6s
#75	DeepSeek V4 Pro high	DeepSeek	1	6.3	$0.761	1/3	243.0s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.761 Muda wa majibu (wastani) 243.0s
#84	MiniMax M3 medium	Minimax	1	6.1	$0.300	1/3	144.7s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.300 Muda wa majibu (wastani) 144.7s
#92	Kimi K2.7 Code medium	Moonshot AI	1	7.8	$0.709	2/3	146.7s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.709 Muda wa majibu (wastani) 146.7s
#105	Kimi K2.6 medium	Moonshot AI	1	5.7	$1.235	1/3	214.4s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $1.235 Muda wa majibu (wastani) 214.4s
#111	Qwen3.5-122B-A10B medium	Qwen	1	6.0	$1.047	1/3	114.5s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $1.047 Muda wa majibu (wastani) 114.5s
#117	DeepSeek V3.2 medium	DeepSeek	1	6.0	$0.078	1/3	248.7s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.078 Muda wa majibu (wastani) 248.7s
#118	GLM 5.1 medium	Z.ai	1	4.6	$0.727	0/3	109.6s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.727 Muda wa majibu (wastani) 109.6s
#122	Seed-2.0-Mini medium	Bytedance Seed	1	5.5	$0.116	1/3	220.5s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.116 Muda wa majibu (wastani) 220.5s
#123	Kimi K2.5 medium	Moonshot AI	1	6.1	$0.479	1/3	217.5s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.479 Muda wa majibu (wastani) 217.5s
#131	Solar Pro 4 low	Upstage	1	5.5	$0.044	1/3	259.6s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.044 Muda wa majibu (wastani) 259.6s
#137	Gemma 4 26B A4B medium	Google	1	2.9	$0.092	0/3	272.5s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.092 Muda wa majibu (wastani) 272.5s

Chuja miundo

Modeli bora kwa Idadi ya Muda umeisha

Idadi ya Muda umeisha dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Uandishi wa msimbo: Muda umeisha

Chuja miundo

Modeli bora kwa Idadi ya Muda umeisha

Idadi ya Muda umeisha dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa