Advertise here
#471

Kev 4B

Jaredpalmer Toleo: 2026-09-28 Imepimwa tarehe: 2026-10-01 17:52 jaredpalmer/kev-4b::none
4BMneneChanzo huriaMakadirio

Muhtasari

Kev 4B hupata alama 2.4 kwenye AI BENCHY na iko nafasi ya #471. Ina reliability 10.0, pass rate 15.9%, gharama jumla $0.002, na wastani wa response time 5.63s.

Kinachofanya Kev 4B iwe ya kipekee: Inaonekana zaidi kwenye Utatuzi wa mafumbo, ambako iko #2; huku Mbinu za kupinga AI ikiwa eneo lake dhaifu zaidi kwenye #14.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-09-28

Makadirio
Vigezo
4B
Muundo
Mnene
Upatikanaji
Chanzo huria
Leseni
Apache-2.0

Makadirio bora kulingana na ushahidi wa umma; mtoa huduma hakufichua thamani zote.

Chanzo cha vigezo 1 Chanzo cha vigezo 2 Chanzo cha upatikanaji

Alama

2.4

Uthabiti

4.9

Uaminifu

10.0

Jumla ya gharama (bei ya sasa)

$0.002

Jumla ya tokeni za matokeo

28,061

Jumla ya tokeni za ingizo

42,804

Bei ya ingizo

$0.042 / 1M

Bei ya toleo

$0.000 / 1M

Bei ya kusoma akiba

Haipo

Bei ya kuandika akiba

Haipo

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Majaribio sahihi

Majaribio yenye makosa: 9

Kiwango cha kupita kwa kila jaribio: 15.9%

Ufunikaji wa benchmark: marudio 36/69. Adapta hutoa chaguo. Inasaidia majaribio 12/23. Majaribio mengine hayatumiki, hayajahesabiwa kama kushindwa. Alama hutumia kundi lote la majaribio.

Majaribio yasiyo thabiti

1

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

5.63s

Muda wa majibu (upeo): 17.79s

Muda wa majibu (jumla): 67.61s

Jibu lisilo sahihi: 9

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Kev 4BdefaultvsGPT-6 Luna DecisionsdefaultKev 4BdefaultvsJev 1.14defaultKev 4BdefaultvsDrex v1.5defaultKev 4BdefaultvsMammoth 1defaultInapatikana bureKev 4BdefaultvsDecider V1.1 27BdefaultKev 4BdefaultvsClassify-1defaultKev 4BdefaultvsReflexdefaultKev 4BdefaultvsDecisions FastdefaultInapatikana bureKev 4BdefaultvsDecider V1.2defaultKev 4BdefaultvsClef Omnidefault

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Kazi za mawakala 0.0 0.0
Mbinu za kupinga AI 2.3 7.5
Uandishi wa msimbo 4.5 6.7
Mchanganyiko 0.0 0.0
Uchanganuzi na uchimbaji wa data 6.5 10.0
Mahususi kwa domeni 5.3 10.0
Akili ya jumla 0.0 0.0
Ufuataji wa maagizo 1.5 5.0
Utatuzi wa mafumbo 2.0 1.0
Mwito wa zana 0.0 0.0
Maarifa ya jumla 0.0 0.0

Modeli zilizolinganishwa