AI BENCHY
Advertise here

Kushindwa kwa kategoria za AI BENCHY

Uandishi wa msimbo: Hakuna jibu

Uandishi wa msimbo
Hakuna jibu

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hakuna jibu katika Uandishi wa msimbo, ili uone udhaifu haraka. Panga kwa: Jumla ya gharama ↑.

Modeli zilizoonyeshwa

15

Jumla ya kushindwa

18

Modeli iliyoathirika zaidi

Gemma 4 31B 1

Sababu za kushindwa

Jibu lisilo sahihi230 Hitilafu ya API43 Muda umeisha23 Hakuna jibu18 Hakufuata maelekezo16 Muundo wa ziada12

Kategoria

Uandishi wa msimbo18 Maarifa ya jumla10 Mahususi kwa domeni6 Uchanganuzi na uchimbaji wa data5 Mbinu za kupinga AI4 Mchanganyiko3 Mwito wa zana2 Ufuataji wa maagizo2 Utatuzi wa mafumbo2
16/16
Nafasi Modeli Kampuni Idadi ya Hakuna jibu Alama ya kategoria Jumla ya gharama Majaribio sahihi Muda wa majibu (wastani)

Modeli bora kwa Idadi ya Hakuna jibu

Idadi ya Hakuna jibu dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa