Kushindwa kwa kategoria za AI BENCHY

Utatuzi wa mafumbo

Muda umeisha

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Muda umeisha katika Utatuzi wa mafumbo, ili uone udhaifu haraka. Panga kwa: Majaribio sahihi ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Qwen3.5-Flash 2

Sababu zinazohusiana za kushindwa

Jibu lisilo sahihi55 Hakufuata maelekezo24 Muda umeisha4 Hitilafu ya API1 Muundo wa ziada1

Kategoria zinazohusiana

Mahususi kwa domeni17 Utatuzi wa mafumbo4 Akili ya jumla3 Mbinu za kupinga AI1

Nafasi	Modeli	Kampuni	Idadi ya Muda umeisha	Alama ya kategoria	Majaribio sahihi	Muda wa majibu (wastani)
#24	Qwen3.5-Flash medium	Qwen	2	4.0	1/3	56.7s
#35	Qwen3.5-35B-A3B medium	Qwen	1	4.0	1/3	31.6s
#43	MiniMax M2.5 medium	Minimax	1	4.0	1/3	11.5s

Utatuzi wa mafumbo

Muda umeisha

Modeli bora kwa Idadi ya Muda umeisha

Idadi ya Muda umeisha dhidi ya wastani wa alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa