Orodha ya modeli za Kazi za mawakala

Ona ni modeli gani za AI zinafanya vizuri zaidi katika Kazi za mawakala, zipi zinabaki thabiti, na pengo kubwa liko wapi. Panga kwa: Majaribio sahihi ↑.

Modeli zilizoonyeshwa

Wastani wa Alama ya Kazi za mawakala

5.8

Modeli bora

Qwen3.8 Max (0902) 6.1

Sababu za kushindwa

Kwa sababu ya kushindwa Jibu lisilo sahihi110 Kwa sababu ya kushindwa Mwito wa zana si sahihi40 Kwa sababu ya kushindwa Hitilafu ya API32 Kwa sababu ya kushindwa Hakufuata maelekezo10 Kwa sababu ya kushindwa Muda umeisha10

380/380

Nafasi	Modeli	Kampuni	Alama ya Kazi za mawakala	Alama	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#21	GPT-5.6 Sol high	OpenAI	10.0	9.5	$0.712	1/1	60.0s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $0.712 Muda wa majibu (wastani) 60.0s
#22	GPT-5.5 low	OpenAI	10.0	9.5	$1.822	1/1	50.6s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $1.822 Muda wa majibu (wastani) 50.6s
#23	Claude Opus 5.5 low	Anthropic	10.0	9.4	$1.733	1/1	68.9s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $1.733 Muda wa majibu (wastani) 68.9s
#24	Claude Opus 5.5 high	Anthropic	10.0	9.4	$2.133	1/1	64.4s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $2.133 Muda wa majibu (wastani) 64.4s
#25	Gemini 3.7 Flash low	Google	10.0	9.4	$0.286	1/1	58.8s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $0.286 Muda wa majibu (wastani) 58.8s
#26	Claude Opus 5 high	Anthropic	10.0	9.4	$4.524	1/1	87.0s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $4.524 Muda wa majibu (wastani) 87.0s
#27	Claude Opus 5 medium	Anthropic	10.0	9.4	$2.870	1/1	78.8s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $2.870 Muda wa majibu (wastani) 78.8s
#28	Seed 2.1 Turbo low	Bytedance Seed	10.0	9.3	$1.645	1/1	102.8s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $1.645 Muda wa majibu (wastani) 102.8s
#29	Claude Opus 5.5 medium	Anthropic	10.0	9.2	$1.804	1/1	62.6s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $1.804 Muda wa majibu (wastani) 62.6s
#30	GPT-5.5 medium	OpenAI	10.0	9.2	$4.809	1/1	59.4s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $4.809 Muda wa majibu (wastani) 59.4s
#31	Claude Sonnet 5.5 max	Anthropic	10.0	9.2	$8.557	1/1	111.1s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $8.557 Muda wa majibu (wastani) 111.1s
#32	Qwen3.8 MAX medium	Qwen	10.0	9.2	$0.948	1/1	115.3s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $0.948 Muda wa majibu (wastani) 115.3s
#33	Qwen3.8 Max (0902) high	Qwen	10.0	9.1	$3.306	1/1	197.1s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $3.306 Muda wa majibu (wastani) 197.1s
#34	GPT-5.3-Codex medium	OpenAI	10.0	9.1	$1.318	1/1	61.9s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $1.318 Muda wa majibu (wastani) 61.9s
#35	Muse Spark 1.3 high	Meta	10.0	9.1	$1.891	1/1	61.3s
Jumla ya majaribio 1 Majaribio yenye makosa 0 Jumla ya gharama $1.891 Muda wa majibu (wastani) 61.3s

Orodha ya Kazi za mawakala

Chuja miundo

Modeli bora kwa Alama ya Kazi za mawakala

Alama ya Kazi za mawakala dhidi ya jumla ya gharama

Modeli bora kwa Muda wa majibu (wastani)