Orodha ya modeli za Uandishi wa msimbo

Kategoria ya AI BENCHY

Ona ni modeli gani za AI zinafanya vizuri zaidi katika Uandishi wa msimbo, zipi zinabaki thabiti, na pengo kubwa liko wapi.

Modeli zilizoonyeshwa

Wastani wa Alama ya Uandishi wa msimbo

5.7

Modeli bora

Sababu za kushindwa

Kwa sababu ya kushindwa Jibu lisilo sahihi230 Kwa sababu ya kushindwa Hitilafu ya API43 Kwa sababu ya kushindwa Muda umeisha25 Kwa sababu ya kushindwa Hakuna jibu18 Kwa sababu ya kushindwa Hakufuata maelekezo16 Kwa sababu ya kushindwa Muundo wa ziada12

189/189

Nafasi	Modeli	Kampuni	Alama ya Uandishi wa msimbo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#176	Laguna Xs.2 medium	Poolside	2.1	4.3	$0.015	0/1	14.4s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.015 Muda wa majibu (wastani) 14.4s
#169	Grok 4.20 Beta none	X AI	1.8	4.7	$0.087	0/1	1.14s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.087 Muda wa majibu (wastani) 1.14s
#181	Grok 4.1 Fast none	X AI	1.8	4.0	$0.008	0/1	1.79s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.008 Muda wa majibu (wastani) 1.79s
#158	Laguna M.1 medium	Poolside	1.5	5.0	$0.033	0/1	35.6s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.033 Muda wa majibu (wastani) 35.6s
#184	gpt-oss-120b none	OpenAI	1.5	4.0	$0.010	0/1	9.57s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.010 Muda wa majibu (wastani) 9.57s
#175	Grok 4.20 none	X AI	1.1	4.4	$0.057	0/1	1.22s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.057 Muda wa majibu (wastani) 1.22s
#186	Nemotron 3 Nano Omni 30b A3b Reasoning medium	NVIDIA	1.1	3.6	$0.000	0/1	38.1s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 38.1s
#111	Gemini 3.1 Flash Lite Preview high	Google	0.0	6.1	$2.310	0/0	0ms
Jumla ya majaribio 0 Majaribio yenye makosa 0 Jumla ya gharama $2.310 Muda wa majibu (wastani) 0ms
#189	LFM2-24B-A2B none	Liquid	0.0	2.4	$0.001	0/0	0ms
Jumla ya majaribio 0 Majaribio yenye makosa 0 Jumla ya gharama $0.001 Muda wa majibu (wastani) 0ms

Orodha ya Uandishi wa msimbo