Orodha ya Kazi za mawakala x Mwito wa zana si sahihi

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Mwito wa zana si sahihi katika Kazi za mawakala, ili uone udhaifu haraka. Panga kwa: Muda wa majibu (wastani) ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Inkling 1

Sababu za kushindwa

Jibu lisilo sahihi108 Mwito wa zana si sahihi44 Hitilafu ya API32 Hakufuata maelekezo14 Muda umeisha10

Kategoria

Mchanganyiko162 Kazi za mawakala44 Mwito wa zana11

44/44

Nafasi	Modeli	Kampuni	Idadi ya Mwito wa zana si sahihi	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#130	Inkling medium	Thinkingmachines	1	4.7	$0.540	0/1	45.9s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.540 Muda wa majibu (wastani) 45.9s
#293	Mercury 2.5 low	Inception	1	5.0	$0.020	0/1	47.1s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.020 Muda wa majibu (wastani) 47.1s
#336	Granite 4.2 8B none	IBM Granite	1	5.0	$0.047	0/1	49.2s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.047 Muda wa majibu (wastani) 49.2s
#295	MiMo-V2.5-Pro none	Xiaomi	1	3.9	$0.157	0/1	49.6s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.157 Muda wa majibu (wastani) 49.6s
#267	GPT-6 Luna none	OpenAI	1	5.0	$0.026	0/1	51.1s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.026 Muda wa majibu (wastani) 51.1s
#195	GLM 5.3 low	Z.ai	1	5.2	$0.473	0/1	51.3s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.473 Muda wa majibu (wastani) 51.3s
#199	Grok 4.3 medium	X AI	1	3.9	$0.989	0/1	51.6s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.989 Muda wa majibu (wastani) 51.6s
#85	Claude Sonnet 5.5 high	Anthropic	1	7.4	$1.197	0/1	53.6s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $1.197 Muda wa majibu (wastani) 53.6s
#250	DeepSeek V4.1 Flash none	DeepSeek	1	7.4	$0.123	0/1	55.8s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.123 Muda wa majibu (wastani) 55.8s
#122	GPT-5.6 Luna medium	OpenAI	1	7.4	$0.101	0/1	58.1s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.101 Muda wa majibu (wastani) 58.1s
#52	Gemini 3.7 Flash low	Google	1	6.4	$0.293	0/1	62.6s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.293 Muda wa majibu (wastani) 62.6s
#310	Hy4 preview none	Tencent	1	5.0	$0.161	0/1	65.5s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.161 Muda wa majibu (wastani) 65.5s
#284	Qwen3.6 35B A3B none	Qwen	1	5.2	$0.105	0/1	65.6s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.105 Muda wa majibu (wastani) 65.6s
#239	MiMo-V2.6-Pro none	Xiaomi	1	5.0	$0.193	0/1	66.1s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.193 Muda wa majibu (wastani) 66.1s
#200	Laguna XS 2.1 medium	Poolside	1	6.1	$0.083	0/1	66.4s
Jumla ya majaribio 1 Majaribio yenye makosa 1 Jumla ya gharama $0.083 Muda wa majibu (wastani) 66.4s

Chuja miundo

Modeli bora kwa Idadi ya Mwito wa zana si sahihi

Idadi ya Mwito wa zana si sahihi dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Kazi za mawakala: Mwito wa zana si sahihi

Chuja miundo

Modeli bora kwa Idadi ya Mwito wa zana si sahihi

Idadi ya Mwito wa zana si sahihi dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa