AI BENCHY
Advertise here

Uandishi wa msimbo: Hitilafu ya API

Uandishi wa msimbo
Hitilafu ya API

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hitilafu ya API katika Uandishi wa msimbo, ili uone udhaifu haraka. Panga kwa: Majaribio sahihi ↓.

Modeli zilizoonyeshwa

15

Jumla ya kushindwa

51

Modeli iliyoathirika zaidi

DeepSeek V4 Flash 0731 1

Sababu za kushindwa

Jibu lisilo sahihi337 Hitilafu ya API51 Hakuna jibu39 Muda umeisha27 Hakufuata maelekezo25 Muundo wa ziada25

Kategoria

Uandishi wa msimbo51 Mchanganyiko34 Mwito wa zana20 Mbinu za kupinga AI16 Mahususi kwa domeni15 Uchanganuzi na uchimbaji wa data15 Maarifa ya jumla14 Akili ya jumla13 Utatuzi wa mafumbo13 Ufuataji wa maagizo1
35/35
Nafasi Modeli Kampuni Idadi ya Hitilafu ya API Alama ya kategoria Jumla ya gharama Majaribio sahihi Muda wa majibu (wastani)

Modeli bora kwa Idadi ya Hitilafu ya API

Idadi ya Hitilafu ya API dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa