Orodha ya modeli za Ufuataji wa maagizo

Ona ni modeli gani za AI zinafanya vizuri zaidi katika Ufuataji wa maagizo, zipi zinabaki thabiti, na pengo kubwa liko wapi. Panga kwa: Jumla ya gharama ↑.

Modeli zilizoonyeshwa

Wastani wa Alama ya Ufuataji wa maagizo

0.8

Modeli bora

Ling 3.1 Flash 1.0

Sababu za kushindwa

Kwa sababu ya kushindwa Jibu lisilo sahihi117 Kwa sababu ya kushindwa Hakufuata maelekezo77 Kwa sababu ya kushindwa Hitilafu ya API25 Kwa sababu ya kushindwa Muundo wa ziada8 Kwa sababu ya kushindwa Muda umeisha5 Kwa sababu ya kushindwa Hakuna jibu2

451/451

Nafasi	Modeli	Kampuni	Alama ya Ufuataji wa maagizo	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#407	Xing4.0 29b A4b medium	Xingchen AGI	0.4	0.4	$0.000	0/2	25.4s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 25.4s
#408	Ling 3.0 Tiny high	Inclusionai	0.7	0.4	$0.000	1/2	3.10s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 3.10s
#409	Ling 3.0 Tiny low	Inclusionai	0.7	0.4	$0.000	1/2	3.09s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 3.09s
#410	Ling 3.0 Tiny medium	Inclusionai	0.7	0.4	$0.000	1/2	3.00s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 3.00s
#413	Elephant Alpha default	Openrouter	1.0	0.4	$0.000	2/2	1.03s
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.000 Muda wa majibu (wastani) 1.03s
#414	Elephant Alpha medium	Openrouter	1.0	0.4	$0.000	2/2	987ms
Jumla ya majaribio 2 Majaribio yenye makosa 0 Jumla ya gharama $0.000 Muda wa majibu (wastani) 987ms
#415	Hunter Alpha default	OpenRouter	0.6	0.3	$0.000	1/2	2.82s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 2.82s
#421	Xing4.0 29b A4b none	Xingchen AGI	0.4	0.3	$0.000	0/2	11.7s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 11.7s
#426	Command A+ none	Cohere	0.3	0.3	$0.000	0/2	95.7s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 95.7s
#429	Nemotron 3 Nano Omni 30b A3b Reasoning medium	NVIDIA	0.7	0.3	$0.000	1/2	1.37s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 1.37s
#431	Nemotron 3 Nano Omni 30b A3b Reasoning default	NVIDIA	0.5	0.3	$0.000	0/2	541ms
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 541ms
#450	Nimble v3 9B default	Bespoke Labs	0.2	0.8	~$0.001	0/1	469ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama ~$0.001 Muda wa majibu (wastani) 469ms
#445	LFM2-24B-A2B default	Liquid	0.6	0.2	$0.001	1/2	752ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.001 Muda wa majibu (wastani) 752ms
#441	Decider Flash V1.2 default	Perplexity	0.2	0.2	$0.001	0/1	424ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.001 Muda wa majibu (wastani) 424ms
#428	Span-02 default	Respan	0.5	0.3	$0.001	1/1	2.30s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $0.001 Muda wa majibu (wastani) 2.30s

Orodha ya Ufuataji wa maagizo

Chuja miundo

Modeli bora kwa Alama ya Ufuataji wa maagizo

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharama

Modeli bora kwa Muda wa majibu (wastani)

Orodha ya Ufuataji wa maagizo

Chuja miundo

Modeli bora kwa Alama ya Ufuataji wa maagizo

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharamaMakadirio yanahusu umeme wa GPU pekee. Hayajumuishi sehemu nyingine za kompyuta wala gharama ya kununua maunzi. NVIDIA GeForce RTX 3090: 0.0021 h × 0.377 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.000263.

Modeli bora kwa Muda wa majibu (wastani)

Alama ya Ufuataji wa maagizo dhidi ya jumla ya gharama