Orodha ya Uchanganuzi na uchimbaji wa data x Jibu lisilo sahihi

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Jibu lisilo sahihi katika Uchanganuzi na uchimbaji wa data, ili uone udhaifu haraka.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

GPT-5 Nano 2

Sababu za kushindwa

Jibu lisilo sahihi66 Hitilafu ya API17 Hakuna jibu9 Muundo wa ziada8 Hakufuata maelekezo7 Muda umeisha2

Kategoria

Mahususi kwa domeni654 Mbinu za kupinga AI386 Uandishi wa msimbo361 Utatuzi wa mafumbo275 Maarifa ya jumla244 Mchanganyiko95 Akili ya jumla90 Ufuataji wa maagizo82 Uchanganuzi na uchimbaji wa data66 Mwito wa zana5

59/59

Nafasi	Modeli	Kampuni	Idadi ya Jibu lisilo sahihi	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#199	GPT-5 Nano medium	OpenAI	2	3.7	$0.118	0/2	21.4s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.118 Muda wa majibu (wastani) 21.4s
#284	MiniMax M2.5 medium	Minimax	2	4.6	$0.327	0/2	7.48s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.327 Muda wa majibu (wastani) 7.48s
#291	Granite 4.2 8B none	IBM Granite	2	2.9	$0.026	0/2	1.05s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.026 Muda wa majibu (wastani) 1.05s
#298	Granite 4.1 8B none	IBM Granite	2	3.0	$0.007	0/2	575ms
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.007 Muda wa majibu (wastani) 575ms
#301	Ling 3.0 Tiny high	Inclusionai	2	2.8	$0.000	0/2	4.16s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 4.16s
#309	Nemotron 3 Nano Omni 30b A3b Reasoning none	NVIDIA	2	3.8	$0.000	0/2	1.42s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 1.42s
#311	LFM2-24B-A2B none	Liquid	2	3.0	$0.001	0/2	714ms
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.001 Muda wa majibu (wastani) 714ms
#31	Claude Opus 4.8 medium	Anthropic	1	7.1	$1.983	1/2	12.3s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $1.983 Muda wa majibu (wastani) 12.3s
#76	Qwen3.8 27B medium	Qwen	1	6.5	~$0.058	1/2	8.76s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama ~$0.058 Muda wa majibu (wastani) 8.76s
#78	Claude Opus 4.8 low	Anthropic	1	6.3	$2.089	1/2	2.27s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $2.089 Muda wa majibu (wastani) 2.27s
#115	Claude Opus 4.8 none	Anthropic	1	7.3	$1.166	1/2	1.77s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $1.166 Muda wa majibu (wastani) 1.77s
#118	Muse Glimmer 30B high	Meta	1	7.3	$0.430	1/2	14.9s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.430 Muda wa majibu (wastani) 14.9s
#121	Muse Glimmer 30B medium	Meta	1	7.3	$0.227	1/2	7.20s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.227 Muda wa majibu (wastani) 7.20s
#124	Step 3.7 Flash low	Stepfun	1	7.3	$0.390	1/2	2.29s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.390 Muda wa majibu (wastani) 2.29s
#131	Mercury 2 medium	Inception	1	7.3	$0.094	1/2	1.11s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.094 Muda wa majibu (wastani) 1.11s

Chuja miundo

Modeli bora kwa Idadi ya Jibu lisilo sahihi

Idadi ya Jibu lisilo sahihi dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Uchanganuzi na uchimbaji wa data: Jibu lisilo sahihi

Chuja miundo

Modeli bora kwa Idadi ya Jibu lisilo sahihi

Idadi ya Jibu lisilo sahihi dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwaMakadirio yanahusu umeme wa GPU pekee. Hayajumuishi sehemu nyingine za kompyuta wala gharama ya kununua maunzi. NVIDIA GeForce RTX 3090: 0.5784 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.057183.

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa