Orodha ya Uandishi wa msimbo x Jibu lisilo sahihi

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Jibu lisilo sahihi katika Uandishi wa msimbo, ili uone udhaifu haraka.

Modeli zilizoonyeshwa

Jumla ya kushindwa

456

Modeli iliyoathirika zaidi

Qwen3.6 Flash 3

Sababu za kushindwa

Jibu lisilo sahihi456 Hitilafu ya API64 Hakufuata maelekezo41 Hakuna jibu41 Muundo wa ziada36 Muda umeisha24

Kategoria

Mahususi kwa domeni811 Mbinu za kupinga AI470 Uandishi wa msimbo456 Utatuzi wa mafumbo323 Maarifa ya jumla289 Akili ya jumla121 Mchanganyiko121 Kazi za mawakala120 Ufuataji wa maagizo101 Uchanganuzi na uchimbaji wa data77

265/265

Nafasi	Modeli	Kampuni	Idadi ya Jibu lisilo sahihi	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#326	Ling 2.6 1t default	Inclusionai	1	0.4	$0.016	0/3	10.6s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.016 Muda wa majibu (wastani) 10.6s
#330	Mimo V2 Omni medium	Xiaomi	1	0.3	$0.683	0/3	183.9s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.683 Muda wa majibu (wastani) 183.9s
#337	Granite 4.2 8B high	IBM Granite	1	0.4	$0.111	0/3	515.3s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.111 Muda wa majibu (wastani) 515.3s
#345	Owl Alpha medium	Openrouter	1	0.5	$0.000	1/3	18.7s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 18.7s
#346	Mimo V2 PRO default	Xiaomi	1	0.5	$0.045	1/3	2.65s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.045 Muda wa majibu (wastani) 2.65s
#347	Owl Alpha default	Openrouter	1	0.6	$0.000	1/3	36.9s
Jumla ya majaribio 3 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 36.9s
#351	Mimo V2 Omni default	Xiaomi	1	0.4	$0.021	0/3	2.75s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.021 Muda wa majibu (wastani) 2.75s
#353	KAT Coder AIR V2.5 default	Kwaipilot	1	0.3	$0.070	0/3	14.3s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.070 Muda wa majibu (wastani) 14.3s
#354	Trinity Large Preview default	Arcee AI	1	0.4	$0.008	0/3	14.3s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.008 Muda wa majibu (wastani) 14.3s
#356	Cobuddy medium	Baidu	1	0.4	$0.000	0/3	79.2s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.000 Muda wa majibu (wastani) 79.2s
#359	MiniMax M2.5 medium	Minimax	1	0.3	$0.440	0/3	188.6s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.440 Muda wa majibu (wastani) 188.6s
#361	gpt-oss-120b none	OpenAI	1	0.1	$0.016	0/1	9.57s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.016 Muda wa majibu (wastani) 9.57s
#371	Granite 4.1 8b default	IBM Granite	1	0.4	$0.007	0/3	775ms
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.007 Muda wa majibu (wastani) 775ms
#376	Grok 4.20 Beta default	X AI	1	0.2	$0.087	0/1	1.14s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.087 Muda wa majibu (wastani) 1.14s
#377	Laguna M.1 default	Poolside	1	0.2	$0.009	0/1	2.93s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.009 Muda wa majibu (wastani) 2.93s

Chuja miundo

Modeli bora kwa Idadi ya Jibu lisilo sahihi

Idadi ya Jibu lisilo sahihi dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Uandishi wa msimbo: Jibu lisilo sahihi

Chuja miundo

Modeli bora kwa Idadi ya Jibu lisilo sahihi

Idadi ya Jibu lisilo sahihi dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa