Advertise here
#424

Decider V1.2

Perplexity Toleo: 2026-10-17 Imepimwa tarehe: 2026-10-17 10:59 perplexity/pplx-decider-v1.2::none
27BMneneChanzo huria

Muhtasari

Decider V1.2 hupata alama 2.6 kwenye AI BENCHY na iko nafasi ya #424. Ina reliability 9.4, pass rate 24.6%, gharama jumla $0.001, na wastani wa response time 517ms.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-10-17

Imeripotiwa
Vigezo
27B
Muundo
Mnene
Upatikanaji
Chanzo huria
Leseni
Apache-2.0

Alama

2.6

Uthabiti

4.9

Uaminifu

9.4

Jumla ya tokeni za matokeo

67

Jumla ya tokeni za ingizo

48,363

Bei ya ingizo

$0.020 / 1M

Bei ya toleo

$0.000 / 1M

Bei ya kusoma akiba

Haipo

Bei ya kuandika akiba

Haipo

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Majaribio sahihi

Majaribio yenye makosa: 7

Kiwango cha kupita kwa kila jaribio: 24.6%

Ufunikaji wa benchmark: marudio 36/69. Adapta hutoa chaguo. Inasaidia majaribio 12/23. Majaribio mengine hayatumiki, hayajahesabiwa kama kushindwa. Alama hutumia kundi lote la majaribio.

Majaribio yasiyo thabiti

1

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

517ms

Muda wa majibu (upeo): 776ms

Muda wa majibu (jumla): 6.20s

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Kazi za mawakala 0.0 0.0
Mbinu za kupinga AI 5.8 7.5
Uandishi wa msimbo 4.5 6.7
Mchanganyiko 0.0 0.0
Uchanganuzi na uchimbaji wa data 6.5 10.0
Mahususi kwa domeni 5.9 7.2
Akili ya jumla 0.0 0.0
Ufuataji wa maagizo 1.5 5.0
Utatuzi wa mafumbo 1.7 3.3
Mwito wa zana 0.0 0.0
Maarifa ya jumla 0.0 0.0

Modeli zilizolinganishwa