Orodha ya Uchanganuzi na uchimbaji wa data x Jibu lisilo sahihi

Ona ni modeli gani za AI zina uwezekano mkubwa wa kupata Jibu lisilo sahihi katika Uchanganuzi na uchimbaji wa data, ili uone udhaifu haraka. Panga kwa: Jumla ya gharama ↑.

Modeli zilizoonyeshwa

Jumla ya kushindwa

Modeli iliyoathirika zaidi

Dots 3 Note Preview 1

Sababu za kushindwa

Jibu lisilo sahihi93 Hitilafu ya API32 Muundo wa ziada12 Hakuna jibu9 Hakufuata maelekezo8 Muda umeisha2

Kategoria

Mahususi kwa domeni878 Mbinu za kupinga AI502 Uandishi wa msimbo477 Utatuzi wa mafumbo344 Maarifa ya jumla306 Akili ya jumla129 Kazi za mawakala126 Mchanganyiko126 Ufuataji wa maagizo111 Uchanganuzi na uchimbaji wa data93

80/80

Nafasi	Modeli	Kampuni	Idadi ya Jibu lisilo sahihi	Alama ya kategoria	Jumla ya gharama	Majaribio sahihi	Muda wa majibu (wastani)
#242	Dots 3 Note Preview high	Dots Studio	1	0.7	$0.000	1/2	12.7s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 12.7s
#243	Dots 3 Note Preview low	Dots Studio	1	0.7	$0.000	1/2	11.5s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 11.5s
#297	Dots 3 Note Preview medium	Dots Studio	1	0.4	$0.000	0/2	78.5s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 78.5s
#381	Cobuddy medium	Baidu	1	0.6	$0.000	1/2	17.4s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 17.4s
#398	Xing4.0 29b A4b medium	Xingchen AGI	2	0.3	$0.000	0/2	147.5s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 147.5s
#399	Ling 3.0 Tiny high	Inclusionai	2	0.3	$0.000	0/2	4.16s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 4.16s
#400	Ling 3.0 Tiny low	Inclusionai	1	0.3	$0.000	0/2	4.82s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 4.82s
#401	Ling 3.0 Tiny medium	Inclusionai	1	0.3	$0.000	0/2	4.41s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 4.41s
#404	Elephant Alpha default	Openrouter	1	0.6	$0.000	1/2	1.04s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 1.04s
#405	Elephant Alpha medium	Openrouter	1	0.6	$0.000	1/2	979ms
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 979ms
#412	Xing4.0 29b A4b none	Xingchen AGI	2	0.3	$0.000	0/2	12.3s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 12.3s
#420	Nemotron 3 Nano Omni 30b A3b Reasoning medium	NVIDIA	1	0.7	$0.000	1/2	2.72s
Jumla ya majaribio 2 Majaribio yenye makosa 1 Jumla ya gharama $0.000 Muda wa majibu (wastani) 2.72s
#422	Nemotron 3 Nano Omni 30b A3b Reasoning default	NVIDIA	2	0.4	$0.000	0/2	1.42s
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.000 Muda wa majibu (wastani) 1.42s
#441	Nimble v3 9B default	Bespoke Labs	2	0.3	~$0.001	0/2	880ms
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama ~$0.001 Muda wa majibu (wastani) 880ms
#436	LFM2-24B-A2B default	Liquid	2	0.3	$0.001	0/2	714ms
Jumla ya majaribio 2 Majaribio yenye makosa 2 Jumla ya gharama $0.001 Muda wa majibu (wastani) 714ms

1 2 3 4 5 6

→

Chuja miundo

Modeli bora kwa Idadi ya Jibu lisilo sahihi

Idadi ya Jibu lisilo sahihi dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa

Uchanganuzi na uchimbaji wa data: Jibu lisilo sahihi

Chuja miundo

Modeli bora kwa Idadi ya Jibu lisilo sahihi

Idadi ya Jibu lisilo sahihi dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)

Modeli bora kwa Gharama iliyopotezwa inayokadiriwaMakadirio yanahusu umeme wa GPU pekee. Hayajumuishi sehemu nyingine za kompyuta wala gharama ya kununua maunzi. NVIDIA GeForce RTX 3090: 0.0021 h × 0.377 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.000263.

Modeli bora kwa Gharama iliyopotezwa inayokadiriwa