Orodha ya modeli za Ufuataji wa maagizo

Ona ni modeli gani za AI zinafanya vizuri zaidi katika Ufuataji wa maagizo, zipi zinabaki thabiti, na pengo kubwa liko wapi.

Modeli zilizoonyeshwa

Wastani wa Alama ya Ufuataji wa maagizo

8.5

Modeli bora

Gemini 3.6 Flash 10.0

Sababu za kushindwa

Kwa sababu ya kushindwa Jibu lisilo sahihi82 Kwa sababu ya kushindwa Hakufuata maelekezo48 Kwa sababu ya kushindwa Muundo wa ziada7 Kwa sababu ya kushindwa Muda umeisha5 Kwa sababu ya kushindwa Hakuna jibu2 Kwa sababu ya kushindwa Hitilafu ya API2

316/316

Nafasi	Modeli	Kampuni	Alama ya Ufuataji wa maagizo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#195	Qwen3.6 Flash none	Qwen	6.3	6.1	$0.062	1/2	1.10s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.062 Muda wa majibu (wastani) 1.10s
#205	Qwen3.5-Flash none	Qwen	6.3	6.0	$0.073	1/2	8.81s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.073 Muda wa majibu (wastani) 8.81s
#206	Qwen3.5-35B-A3B none	Qwen	6.3	5.9	$0.076	1/2	809ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.076 Muda wa majibu (wastani) 809ms
#212	GPT-5.4 Mini none	OpenAI	6.3	5.9	$0.095	1/2	728ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.095 Muda wa majibu (wastani) 728ms
#223	Qwen3.5-122B-A10B none	Qwen	6.3	5.7	$0.283	1/2	513ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.283 Muda wa majibu (wastani) 513ms
#228	Gemma 4 26B A4B none	Google	6.3	5.6	$0.015	1/2	690ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.015 Muda wa majibu (wastani) 690ms
#236	Qwen3.8 27B none	Qwen	6.3	5.5	~$0.006	1/2	582ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama ~$0.006 Muda wa majibu (wastani) 582ms
#246	Inkling Small none	Thinkingmachines	6.3	5.3	$0.054	1/2	767ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.054 Muda wa majibu (wastani) 767ms
#253	Inkling none	Thinkingmachines	6.3	5.2	$0.147	1/2	1.72s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.147 Muda wa majibu (wastani) 1.72s
#259	Qwen3 Coder Next none	Qwen	6.3	5.1	$0.026	1/2	7.78s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.026 Muda wa majibu (wastani) 7.78s
#268	GPT-4o-mini none	OpenAI	6.3	5.0	$0.010	1/2	1.11s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.010 Muda wa majibu (wastani) 1.11s
#270	Mercury 2.5 Preview none	Inception	6.3	4.9	$0.018	1/2	1.26s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.018 Muda wa majibu (wastani) 1.26s
#272	Nemotron 3 Super none	NVIDIA	6.3	4.8	$0.008	1/2	804ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.008 Muda wa majibu (wastani) 804ms
#276	GPT-5.4 Nano none	OpenAI	6.3	4.8	$0.041	1/2	784ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.041 Muda wa majibu (wastani) 784ms
#277	Trinity Large Thinking high	Arcee AI	6.3	4.8	$0.592	1/2	4.12s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.592 Muda wa majibu (wastani) 4.12s

Orodha ya Ufuataji wa maagizo

Chuja miundo

Modeli bora kwa Alama ya Ufuataji wa maagizo

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharama

Modeli bora kwa Muda wa majibu (wastani)

Orodha ya Ufuataji wa maagizo

Chuja miundo

Modeli bora kwa Alama ya Ufuataji wa maagizo

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharamaMakadirio yanahusu umeme wa GPU pekee. Hayajumuishi sehemu nyingine za kompyuta wala gharama ya kununua maunzi. NVIDIA GeForce RTX 3090: 0.0572 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.005659.

Modeli bora kwa Muda wa majibu (wastani)

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharama