Orodha ya modeli za Utatuzi wa mafumbo

Ona ni modeli gani za AI zinafanya vizuri zaidi katika Utatuzi wa mafumbo, zipi zinabaki thabiti, na pengo kubwa liko wapi.

Modeli zilizoonyeshwa

Wastani wa Alama ya Utatuzi wa mafumbo

0.7

Modeli bora

Gemini 3.6 Flash 1.0

Sababu za kushindwa

Kwa sababu ya kushindwa Jibu lisilo sahihi352 Kwa sababu ya kushindwa Hakufuata maelekezo166 Kwa sababu ya kushindwa Hitilafu ya API35 Kwa sababu ya kushindwa Muundo wa ziada16 Kwa sababu ya kushindwa Hakuna jibu14 Kwa sababu ya kushindwa Muda umeisha11

451/451

Nafasi	Modeli	Kampuni	Alama ya Utatuzi wa mafumbo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#404	Ling 3.0 Tiny default	Inclusionai	0.3	0.4	$0.000	0/3	2.64s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.000 Muda wa majibu (wastani) 2.64s
#408	Ling 3.0 Tiny high	Inclusionai	0.3	0.4	$0.000	0/3	54.2s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.000 Muda wa majibu (wastani) 54.2s
#409	Ling 3.0 Tiny low	Inclusionai	0.3	0.4	$0.000	0/3	32.5s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.000 Muda wa majibu (wastani) 32.5s
#412	Laguna M.1 default	Poolside	0.3	0.4	$0.009	0/3	891ms
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.009 Muda wa majibu (wastani) 891ms
#417	Command A+ medium	Cohere	0.3	0.3	$0.064	0/3	92.1s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.064 Muda wa majibu (wastani) 92.1s
#423	Command A+ high	Cohere	0.3	0.3	$0.079	0/3	86.2s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.079 Muda wa majibu (wastani) 86.2s
#424	Grok 4.1 Fast default	X AI	0.3	0.3	$0.008	0/3	1.10s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.008 Muda wa majibu (wastani) 1.10s
#426	Command A+ none	Cohere	0.3	0.3	$0.000	0/3	88.1s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.000 Muda wa majibu (wastani) 88.1s
#427	Command A+ low	Cohere	0.3	0.3	$0.073	0/3	95.8s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.073 Muda wa majibu (wastani) 95.8s
#431	Nemotron 3 Nano Omni 30b A3b Reasoning default	NVIDIA	0.3	0.3	$0.000	0/3	532ms
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.000 Muda wa majibu (wastani) 532ms
#358	Laguna S 2.1 high	Poolside	0.3	0.5	$0.145	0/3	1.62s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.145 Muda wa majibu (wastani) 1.62s
#382	Ling 2.6 Flash default	Inclusionai	0.3	0.5	$0.002	0/3	6.51s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.002 Muda wa majibu (wastani) 6.51s
#394	GLM 4.7 Flash medium	Z.ai	0.3	0.4	$0.193	0/3	12.9s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.193 Muda wa majibu (wastani) 12.9s
#429	Nemotron 3 Nano Omni 30b A3b Reasoning medium	NVIDIA	0.3	0.3	$0.000	0/3	1.40s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.000 Muda wa majibu (wastani) 1.40s
#371	Granite 4.2 8B high	IBM Granite	0.3	0.5	$0.111	0/3	202.7s
Jumla ya majaribio 3 Majaribio yenye makosa 3 Jumla ya gharama $0.111 Muda wa majibu (wastani) 202.7s

Orodha ya Utatuzi wa mafumbo

Chuja miundo

Modeli bora kwa Alama ya Utatuzi wa mafumbo

Alama ya Utatuzi wa mafumbo dhidi ya jumla ya gharama

Modeli bora kwa Muda wa majibu (wastani)