Orodha ya Kazi za mawakala x Hitilafu ya API

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hitilafu ya API katika Kazi za mawakala, ili uone udhaifu haraka. Panga kwa: Muda wa majibu (wastani) ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Ring 2.6 1t 1

Sababu za kushindwa

Jibu lisilo sahihi108 Mwito wa zana si sahihi44 Hitilafu ya API32 Hakufuata maelekezo14 Muda umeisha10

Kategoria

Uandishi wa msimbo64 Mchanganyiko49 Mbinu za kupinga AI36 Mwito wa zana33 Kazi za mawakala32 Uchanganuzi na uchimbaji wa data32 Mahususi kwa domeni30 Utatuzi wa mafumbo25 Maarifa ya jumla18 Ufuataji wa maagizo17

32/32

Nafasi	Modeli	Kampuni	Idadi ya Hitilafu ya API	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#331	Ring 2.6 1t none	Inclusionai	1	3.0	$0.004	0/1	19ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.004 Muda wa majibu (wastani) 19ms
#252	Ring 2.6 1t medium	Inclusionai	1	3.0	$0.072	0/1	21ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.072 Muda wa majibu (wastani) 21ms
#355	Ling 3.0 Tiny low	Inclusionai	1	3.0	$0.000	0/1	21ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 21ms
#128	Inkling Small high	Thinkingmachines	1	3.0	$0.402	0/1	23ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.402 Muda wa majibu (wastani) 23ms
#351	Ling 3.0 Tiny none	Inclusionai	1	3.0	$0.000	0/1	23ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 23ms
#285	Inkling Small low	Thinkingmachines	1	3.0	$0.059	0/1	24ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.059 Muda wa majibu (wastani) 24ms
#356	Ling 3.0 Tiny medium	Inclusionai	1	3.0	$0.000	0/1	24ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 24ms
#286	Ling 3.0 Flash none	Inclusionai	1	3.0	$0.000	0/1	26ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 26ms
#354	Ling 3.0 Tiny high	Inclusionai	1	3.0	$0.000	0/1	28ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 28ms
#303	Inkling Small none	Thinkingmachines	1	3.0	$0.058	0/1	31ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.058 Muda wa majibu (wastani) 31ms
#329	Ling 2.6 Flash none	Inclusionai	1	3.0	$0.002	0/1	32ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.002 Muda wa majibu (wastani) 32ms
#307	Ling 2.6 1t none	Inclusionai	1	3.0	$0.012	0/1	38ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.012 Muda wa majibu (wastani) 38ms
#251	Ling 3.0 Flash high	Inclusionai	1	3.0	$0.000	0/1	42ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 42ms
#240	Inkling Small medium	Thinkingmachines	1	3.0	$0.118	0/1	49ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.118 Muda wa majibu (wastani) 49ms
#352	Granite 4.1 8b none	IBM Granite	1	3.0	$0.007	0/1	60ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.007 Muda wa majibu (wastani) 60ms

Chuja miundo

Modeli bora kwa Idadi ya Hitilafu ya API

Idadi ya Hitilafu ya API dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Kazi za mawakala: Hitilafu ya API

Chuja miundo

Modeli bora kwa Idadi ya Hitilafu ya API

Idadi ya Hitilafu ya API dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa