Orodha ya Uandishi wa msimbo x Hakuna jibu

Kushindwa kwa kategoria za AI BENCHY

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hakuna jibu katika Uandishi wa msimbo, ili uone udhaifu haraka.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Sababu za kushindwa

Jibu lisilo sahihi120 Hakuna jibu18 Hakufuata maelekezo16 Muda umeisha12 Muundo wa ziada7 Hitilafu ya API6

Kategoria

Uandishi wa msimbo18 Uchanganuzi na uchimbaji wa data5 Mahususi kwa domeni4 Ufuataji wa maagizo3 Mbinu za kupinga AI2 Mchanganyiko2 Mwito wa zana2 Utatuzi wa mafumbo2

Nafasi	Modeli	Kampuni	Idadi ya Hakuna jibu	Alama ya kategoria	Majaribio sahihi	Muda wa majibu (wastani)
#133	MiniMax M2.7 medium	Minimax	1	6.7	1/2	54.7s
#148	GLM 4.7 Flash medium	Z.ai	1	3.4	0/2	55.3s
#151	Qwen3.5-9B medium	Qwen	1	2.8	0/2	135.6s

Modeli bora kwa Idadi ya Hakuna jibu