Advertise here

Uandishi wa msimbo: Hakufuata maelekezo

Uandishi wa msimbo
Hakufuata maelekezo

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hakufuata maelekezo katika Uandishi wa msimbo, ili uone udhaifu haraka. Panga kwa: Muda wa majibu (wastani) ↓.

Modeli zilizoonyeshwa

15

Jumla ya kushindwa

41

Modeli iliyoathirika zaidi

Mistral Large 4 1

Sababu za kushindwa

Jibu lisilo sahihi456 Hitilafu ya API64 Hakufuata maelekezo41 Hakuna jibu41 Muundo wa ziada36 Muda umeisha24

Kategoria

Utatuzi wa mafumbo147 Akili ya jumla134 Ufuataji wa maagizo65 Mbinu za kupinga AI49 Uandishi wa msimbo41 Mwito wa zana12 Kazi za mawakala10 Uchanganuzi na uchimbaji wa data8 Mahususi kwa domeni3 Mchanganyiko1
38/38
Nafasi Modeli Kampuni Idadi ya Hakufuata maelekezo Alama ya kategoria Jumla ya gharama Majaribio sahihi Muda wa majibu (wastani)

Modeli bora kwa Idadi ya Hakufuata maelekezo

Idadi ya Hakufuata maelekezo dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa