Orodha ya kushindwa kwa Hitilafu ya API

Kushindwa kwa AI BENCHY

Ona ni modeli gani za AI hukutana na Hitilafu ya API mara nyingi zaidi ili utambue hatari za utegemevu kabla ya kuchagua. Panga kwa: Idadi ya kushindwa ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Gemini 3 PRO Preview 1

Kategoria

Katika kategoria Mwito wa zana6 Katika kategoria Uandishi wa msimbo6 Katika kategoria Uchanganuzi na uchimbaji wa data6 Katika kategoria Mchanganyiko5 Katika kategoria Mahususi kwa domeni2 Katika kategoria Ufuataji wa maagizo1 Katika kategoria Utatuzi wa mafumbo1

Nafasi	Modeli	Kampuni	Idadi ya Hitilafu ya API	Alama	Majaribio sahihi	Muda wa majibu (wastani)
#73	Mistral Small 4 medium	Mistral	2	5.7	5/18	5.64s
#84	gpt-oss-120b none	OpenAI	3	5.2	4/18	12.0s
#98	LFM2-24B-A2B none	Liquid	4	4.1	1/16	811ms

Kushindwa kwa Hitilafu ya API

Modeli bora kwa Idadi ya Hitilafu ya API

Idadi ya Hitilafu ya API dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)