Orodha ya Utatuzi wa mafumbo x Hakuna jibu

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Hakuna jibu katika Utatuzi wa mafumbo, ili uone udhaifu haraka.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Sababu za kushindwa

Jibu lisilo sahihi201 Hakufuata maelekezo90 Hitilafu ya API12 Muundo wa ziada8 Muda umeisha5 Hakuna jibu3

Kategoria

Mchanganyiko29 Uandishi wa msimbo18 Maarifa ya jumla13 Mahususi kwa domeni8 Uchanganuzi na uchimbaji wa data8 Mbinu za kupinga AI4 Utatuzi wa mafumbo3 Mwito wa zana2 Ufuataji wa maagizo2

3/3

Nafasi	Modeli	Kampuni	Idadi ya Hakuna jibu	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#17	Claude Fable 5 medium	Anthropic	1	7.7	$3.478	2/3	5.18s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $3.478 Muda wa majibu (wastani) 5.18s
#27	Muse Spark 1.1 high	Meta	1	7.8	$1.694	2/3	70.0s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $1.694 Muda wa majibu (wastani) 70.0s
#101	MiMo-V2.5 medium	Xiaomi	1	8.2	$0.082	2/3	20.3s
Jumla ya majaribio 3 Majaribio yenye makosa 1 Jumla ya gharama $0.082 Muda wa majibu (wastani) 20.3s

Chuja miundo