Orodha ya Kazi za mawakala x Hitilafu ya API

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hitilafu ya API katika Kazi za mawakala, ili uone udhaifu haraka.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Sababu za kushindwa

Jibu lisilo sahihi108 Mwito wa zana si sahihi44 Hitilafu ya API32 Hakufuata maelekezo14 Muda umeisha10

Kategoria

Uandishi wa msimbo64 Mchanganyiko49 Mbinu za kupinga AI36 Mwito wa zana33 Kazi za mawakala32 Uchanganuzi na uchimbaji wa data32 Mahususi kwa domeni30 Utatuzi wa mafumbo25 Maarifa ya jumla18 Ufuataji wa maagizo17

32/32

Nafasi	Modeli	Kampuni	Idadi ya Hitilafu ya API	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#356	Ling 3.0 Tiny medium	Inclusionai	1	3.0	$0.000	0/1	24ms
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 24ms
#371	Command A+ none	Cohere	1	3.0	$0.000	0/1	1.05s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 1.05s

Chuja miundo