Orodha ya Ufuataji wa maagizo x Hitilafu ya API

Kushindwa kwa kategoria za AI BENCHY

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hitilafu ya API katika Ufuataji wa maagizo, ili uone udhaifu haraka.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Sababu za kushindwa

Jibu lisilo sahihi44 Hakufuata maelekezo22 Hitilafu ya API1 Muda umeisha1

Kategoria

Mwito wa zana6 Uandishi wa msimbo6 Uchanganuzi na uchimbaji wa data6 Mchanganyiko5 Mahususi kwa domeni2 Ufuataji wa maagizo1 Utatuzi wa mafumbo1

Nafasi	Modeli	Kampuni	Idadi ya Hitilafu ya API	Alama ya kategoria	Majaribio sahihi	Muda wa majibu (wastani)
#47	Grok 4.20 medium	X AI	1	7.3	1/2	4.42s

Modeli bora kwa Idadi ya Hitilafu ya API