Orodha ya modeli za Ufuataji wa maagizo

Ona ni modeli gani za AI zinafanya vizuri zaidi katika Ufuataji wa maagizo, zipi zinabaki thabiti, na pengo kubwa liko wapi.

Modeli zilizoonyeshwa

Wastani wa Alama ya Ufuataji wa maagizo

8.5

Modeli bora

Gemini 3 Flash Preview 10.0

Sababu za kushindwa

Kwa sababu ya kushindwa Jibu lisilo sahihi61 Kwa sababu ya kushindwa Hakufuata maelekezo18 Kwa sababu ya kushindwa Muundo wa ziada3 Kwa sababu ya kushindwa Hakuna jibu2 Kwa sababu ya kushindwa Hitilafu ya API1 Kwa sababu ya kushindwa Muda umeisha1

210/210

Nafasi	Modeli	Kampuni	Alama ya Ufuataji wa maagizo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#82	DeepSeek V4 Pro none	DeepSeek	6.3	6.9	$0.096	1/2	4.12s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.096 Muda wa majibu (wastani) 4.12s
#71	Qwen3.7 Plus none	Qwen	6.3	7.2	$0.106	1/2	929ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.106 Muda wa majibu (wastani) 929ms
#103	Qwen3.5-27B none	Qwen	6.3	6.5	$0.090	1/2	1.03s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.090 Muda wa majibu (wastani) 1.03s
#124	Qwen3.6 Flash none	Qwen	6.3	6.1	$0.062	1/2	1.10s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.062 Muda wa majibu (wastani) 1.10s
#125	Qwen3.5-Flash none	Qwen	6.3	6.1	$0.073	1/2	8.81s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.073 Muda wa majibu (wastani) 8.81s
#127	Qwen3.5-35B-A3B none	Qwen	6.3	6.1	$0.106	1/2	809ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.106 Muda wa majibu (wastani) 809ms
#136	GPT-5.4 Mini none	OpenAI	6.3	5.9	$0.095	1/2	728ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.095 Muda wa majibu (wastani) 728ms
#142	Qwen3.5-122B-A10B none	Qwen	6.3	5.7	$0.247	1/2	513ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.247 Muda wa majibu (wastani) 513ms
#156	Gemma 4 26B A4B none	Google	6.3	5.5	$0.015	1/2	690ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.015 Muda wa majibu (wastani) 690ms
#164	Inkling none	Thinkingmachines	6.3	5.2	$0.147	1/2	1.72s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.147 Muda wa majibu (wastani) 1.72s
#166	Qwen3 Coder Next none	Qwen	6.3	5.1	$0.025	1/2	7.78s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.025 Muda wa majibu (wastani) 7.78s
#174	GPT-4o-mini none	OpenAI	6.3	5.0	$0.010	1/2	1.11s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.010 Muda wa majibu (wastani) 1.11s
#177	Nemotron 3 Super none	NVIDIA	6.3	4.9	$0.008	1/2	804ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.008 Muda wa majibu (wastani) 804ms
#180	GPT-5.4 Nano none	OpenAI	6.3	4.8	$0.041	1/2	784ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.041 Muda wa majibu (wastani) 784ms
#187	Qwen3 Coder Next medium	Qwen	6.3	4.7	$0.032	1/2	7.49s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.032 Muda wa majibu (wastani) 7.49s

Orodha ya Ufuataji wa maagizo

Chuja miundo

Modeli bora kwa Alama ya Ufuataji wa maagizo

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharama

Modeli bora kwa Muda wa majibu (wastani)