Orodha ya modeli za Ufuataji wa maagizo

Ona ni modeli gani za AI zinafanya vizuri zaidi katika Ufuataji wa maagizo, zipi zinabaki thabiti, na pengo kubwa liko wapi.

Modeli zilizoonyeshwa

Wastani wa Alama ya Ufuataji wa maagizo

0.8

Modeli bora

Gemini 3.6 Flash 1.0

Sababu za kushindwa

Kwa sababu ya kushindwa Jibu lisilo sahihi117 Kwa sababu ya kushindwa Hakufuata maelekezo77 Kwa sababu ya kushindwa Hitilafu ya API25 Kwa sababu ya kushindwa Muundo wa ziada8 Kwa sababu ya kushindwa Muda umeisha5 Kwa sababu ya kushindwa Hakuna jibu2

451/451

Nafasi	Modeli	Kampuni	Alama ya Ufuataji wa maagizo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#393	MiniMax M2.5 medium	Minimax	0.8	0.4	$0.440	1/2	621ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.440 Muda wa majibu (wastani) 621ms
#62	Muse Spark Open medium	Meta	0.7	0.9	$1.260	1/2	18.4s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $1.260 Muda wa majibu (wastani) 18.4s
#162	Claude Fable 5.1 medium	Anthropic	0.7	0.7	$3.197	1/2	5.77s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $3.197 Muda wa majibu (wastani) 5.77s
#189	Step 5 Preview high	Stepfun	0.7	0.7	$4.513	1/2	20.5s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $4.513 Muda wa majibu (wastani) 20.5s
#343	Mistral Small 4 medium	Mistral	0.7	0.5	$0.126	1/2	1.38s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.126 Muda wa majibu (wastani) 1.38s
#375	Gemini 3.1 Flash Lite high	Google	0.7	0.5	$2.044	1/2	23.3s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $2.044 Muda wa majibu (wastani) 23.3s
#72	Muse Spark 1.1 low	Meta	0.7	0.9	$0.885	1/2	5.42s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.885 Muda wa majibu (wastani) 5.42s
#315	Nemotron 3 Super medium	NVIDIA	0.7	0.6	$0.081	1/2	6.97s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.081 Muda wa majibu (wastani) 6.97s
#429	Nemotron 3 Nano Omni 30b A3b Reasoning medium	NVIDIA	0.7	0.3	$0.000	1/2	1.37s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 1.37s
#144	GPT-6 Luna low	OpenAI	0.7	0.8	$0.033	1/2	17.4s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.033 Muda wa majibu (wastani) 17.4s
#196	Ember-1 high	Fireworks	0.7	0.7	$2.405	1/2	33.4s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $2.405 Muda wa majibu (wastani) 33.4s
#295	Qwen3.8 Flash Next none	Qwen	0.7	0.6	~$0.011	1/2	612ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama ~$0.011 Muda wa majibu (wastani) 612ms
#331	GPT-5.6 Luna none	OpenAI	0.7	0.5	$0.042	1/2	1.23s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.042 Muda wa majibu (wastani) 1.23s
#363	Hy4 preview none	Tencent	0.7	0.5	$0.165	1/2	47.9s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.165 Muda wa majibu (wastani) 47.9s
#408	Ling 3.0 Tiny high	Inclusionai	0.7	0.4	$0.000	1/2	3.10s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 3.10s

Orodha ya Ufuataji wa maagizo

Chuja miundo

Modeli bora kwa Alama ya Ufuataji wa maagizo

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharama

Modeli bora kwa Muda wa majibu (wastani)

Orodha ya Ufuataji wa maagizo

Chuja miundo

Modeli bora kwa Alama ya Ufuataji wa maagizo

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharamaMakadirio yanahusu umeme wa GPU pekee. Hayajumuishi sehemu nyingine za kompyuta wala gharama ya kununua maunzi. NVIDIA GeForce RTX 3090: 0.1095 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.010823.

Modeli bora kwa Muda wa majibu (wastani)

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharama