Orodha ya kushindwa kwa Jibu lisilo sahihi

Kushindwa kwa AI BENCHY

Ona ni modeli gani za AI hukutana na Jibu lisilo sahihi mara nyingi zaidi ili utambue hatari za utegemevu kabla ya kuchagua. Panga kwa: Muda wa majibu (wastani) ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

1204

Modeli iliyoathirika zaidi

Mistral Small 4 15

Kategoria

Katika kategoria Mahususi kwa domeni314 Katika kategoria Mbinu za kupinga AI245 Katika kategoria Uandishi wa msimbo194 Katika kategoria Utatuzi wa mafumbo147 Katika kategoria Maarifa ya jumla130 Katika kategoria Ufuataji wa maagizo53 Katika kategoria Mchanganyiko52 Katika kategoria Uchanganuzi na uchimbaji wa data35 Katika kategoria Akili ya jumla32 Katika kategoria Mwito wa zana2

Nafasi	Modeli	Kampuni	Idadi ya Jibu lisilo sahihi	Alama	Majaribio sahihi	Muda wa majibu (wastani)
#142	Mistral Small 4 none	Mistral	15	4.9	5/21	630ms
#155	Mercury 2 none	Inception	16	4.5	4/21	653ms
#163	Granite 4.1 8B none	IBM Granite	13	4.0	2/21	728ms
#162	Nemotron 3 Nano Omni 30b A3b Reasoning none	NVIDIA	9	4.1	2/19	728ms
#160	LFM2-24B-A2B none	Liquid	9	4.2	2/16	782ms
#146	Laguna Xs.2 none	Poolside	8	4.8	5/19	806ms
#97	Gemini 2.5 Flash none	Google	12	6.2	9/21	875ms
#90	Gemini 3.1 Flash Lite none	Google	11	6.4	9/21	1.06s
#127	Grok 4.20 none	X AI	10	5.4	6/18	1.11s
#144	GPT-5.4 Mini none	OpenAI	13	4.9	5/21	1.13s
#106	Grok 4.20 Beta none	X AI	10	5.8	6/18	1.19s
#58	Gemini 3.1 Flash Lite Preview none	Google	7	7.2	12/21	1.21s
#137	Elephant Alpha none	Openrouter	9	5.1	5/21	1.22s
#136	Elephant Alpha medium	Openrouter	9	5.1	6/21	1.27s
#34	Qwen3.7 Max none	Qwen	7	7.7	14/21	1.30s

Kushindwa kwa Jibu lisilo sahihi

Modeli bora kwa Idadi ya Jibu lisilo sahihi

Idadi ya Jibu lisilo sahihi dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)