Orodha ya modeli za Ufuataji wa maagizo

Ona ni modeli gani za AI zinafanya vizuri zaidi katika Ufuataji wa maagizo, zipi zinabaki thabiti, na pengo kubwa liko wapi.

Modeli zilizoonyeshwa

Wastani wa Alama ya Ufuataji wa maagizo

0.8

Modeli bora

Gemini 3.6 Flash 1.0

Sababu za kushindwa

Kwa sababu ya kushindwa Jibu lisilo sahihi117 Kwa sababu ya kushindwa Hakufuata maelekezo77 Kwa sababu ya kushindwa Hitilafu ya API25 Kwa sababu ya kushindwa Muundo wa ziada8 Kwa sababu ya kushindwa Muda umeisha5 Kwa sababu ya kushindwa Hakuna jibu2

451/451

Nafasi	Modeli	Kampuni	Alama ya Ufuataji wa maagizo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#154	Seed-2.0-Code medium	Bytedance Seed	1.0	0.7	$1.275	2/2	10.3s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $1.275 Muda wa majibu (wastani) 10.3s
#159	Inkling medium	Thinkingmachines	1.0	0.7	$0.527	2/2	6.17s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.527 Muda wa majibu (wastani) 6.17s
#164	Gemini 2.5 Flash medium	Google	1.0	0.7	$0.680	2/2	2.62s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.680 Muda wa majibu (wastani) 2.62s
#167	Gemini 3.5 Flash Lite medium	Google	1.0	0.7	$0.440	2/2	1.72s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.440 Muda wa majibu (wastani) 1.72s
#173	Qwen3.7 Flash high	Qwen	1.0	0.7	$0.063	2/2	9.41s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.063 Muda wa majibu (wastani) 9.41s
#176	Step 3.7 Flash low	Stepfun	1.0	0.7	$0.449	2/2	1.58s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.449 Muda wa majibu (wastani) 1.58s
#179	Qwen3.8 Flash Next xhigh	Qwen	1.0	0.7	~$0.195	2/2	3.72s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama ~$0.195 Muda wa majibu (wastani) 3.72s
#184	GPT-5.2 Chat default	OpenAI	1.0	0.7	$0.594	2/2	5.51s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.594 Muda wa majibu (wastani) 5.51s
#191	Grok 4.6 low	X AI	1.0	0.7	$0.781	2/2	6.64s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.781 Muda wa majibu (wastani) 6.64s
#203	Inkling low	Thinkingmachines	1.0	0.7	$0.293	2/2	1.81s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.293 Muda wa majibu (wastani) 1.81s
#204	Mercury 2.5 Preview medium	Inception	1.0	0.7	$0.039	2/2	1.35s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.039 Muda wa majibu (wastani) 1.35s
#208	Grok 4.7 xhigh	X AI	1.0	0.7	$3.398	2/2	17.3s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $3.398 Muda wa majibu (wastani) 17.3s
#215	GPT 5.3 Chat default	OpenAI	1.0	0.7	$0.533	2/2	3.51s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.533 Muda wa majibu (wastani) 3.51s
#220	GLM 5.2 none	Z.ai	1.0	0.7	$0.250	2/2	3.84s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.250 Muda wa majibu (wastani) 3.84s
#224	Step 3.7 Flash high	Stepfun	1.0	0.7	$1.478	2/2	1.52s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $1.478 Muda wa majibu (wastani) 1.52s

Orodha ya Ufuataji wa maagizo

Chuja miundo

Modeli bora kwa Alama ya Ufuataji wa maagizo

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharama

Modeli bora kwa Muda wa majibu (wastani)

Orodha ya Ufuataji wa maagizo

Chuja miundo

Modeli bora kwa Alama ya Ufuataji wa maagizo

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharamaMakadirio yanahusu umeme wa GPU pekee. Hayajumuishi sehemu nyingine za kompyuta wala gharama ya kununua maunzi. NVIDIA GeForce RTX 3090: 1.9676 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.194534.

Modeli bora kwa Muda wa majibu (wastani)

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharama