Orodha ya modeli za Uandishi wa msimbo

Kategoria ya AI BENCHY

Ona ni modeli gani za AI zinafanya vizuri zaidi katika Uandishi wa msimbo, zipi zinabaki thabiti, na pengo kubwa liko wapi.

Modeli zilizoonyeshwa

Wastani wa Alama ya Uandishi wa msimbo

5.7

Modeli bora

Gemini 3.5 Flash 10.0

Sababu za kushindwa

Kwa sababu ya kushindwa Jibu lisilo sahihi230 Kwa sababu ya kushindwa Hitilafu ya API43 Kwa sababu ya kushindwa Muda umeisha25 Kwa sababu ya kushindwa Hakuna jibu18 Kwa sababu ya kushindwa Hakufuata maelekezo16 Kwa sababu ya kushindwa Muundo wa ziada12

189/189

Nafasi	Modeli	Kampuni	Alama ya Uandishi wa msimbo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#174	Hunter Alpha none	OpenRouter	9.8	4.5	$0.000	0/1	0ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 0ms
#188	Step 3.5 Flash none	Stepfun	9.8	2.6	$0.020	0/1	0ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.020 Muda wa majibu (wastani) 0ms
#36	Claude Sonnet 5 medium	Anthropic	9.0	7.9	$0.550	2/3	17.3s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.550 Muda wa majibu (wastani) 17.3s
#12	GPT-5.5 medium	OpenAI	8.8	9.0	$3.679	2/3	59.8s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $3.679 Muda wa majibu (wastani) 59.8s
#14	Qwen3.6 Max Preview medium	Qwen	8.8	8.9	$0.960	2/3	146.5s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.960 Muda wa majibu (wastani) 146.5s
#20	GPT-5.4 medium	OpenAI	8.8	8.5	$1.210	2/3	44.4s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $1.210 Muda wa majibu (wastani) 44.4s
#22	GPT-5.2 Chat none	OpenAI	8.8	8.5	$0.393	2/3	9.82s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.393 Muda wa majibu (wastani) 9.82s
#23	Step 3.7 Flash medium	Stepfun	8.8	8.5	$0.376	2/3	27.4s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.376 Muda wa majibu (wastani) 27.4s
#80	Gemini 3.5 Flash none	Google	8.8	7.0	$1.079	2/3	34.7s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $1.079 Muda wa majibu (wastani) 34.7s
#2	Gemini 3 Flash Preview medium	Google	8.6	9.6	$0.667	2/3	84.4s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.667 Muda wa majibu (wastani) 84.4s
#31	Nemotron 3 Ultra 550b A55b medium	NVIDIA	8.4	8.1	$0.158	2/3	26.5s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.158 Muda wa majibu (wastani) 26.5s
#33	GPT-5.4 Mini medium	OpenAI	8.4	8.0	$0.526	2/3	57.9s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.526 Muda wa majibu (wastani) 57.9s
#182	Laguna Xs.2 none	Poolside	8.3	4.0	$0.004	0/1	1.96s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.004 Muda wa majibu (wastani) 1.96s
#17	GLM 5.2 medium	Z.ai	8.2	8.7	$0.179	2/3	41.0s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.179 Muda wa majibu (wastani) 41.0s
#50	Step 3.7 Flash low	Stepfun	8.2	7.7	$0.341	2/3	9.46s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.341 Muda wa majibu (wastani) 9.46s

Orodha ya Uandishi wa msimbo

Chuja miundo

Modeli bora kwa Alama ya Uandishi wa msimbo

Alama ya Uandishi wa msimbo dhidi ya jumla ya gharama

Modeli bora kwa Muda wa majibu (wastani)