Urambazaji
Advertise here

Classify-1 (default) vs Jev 1.14 (default)

Jev 1.14 (default) inaongoza kwa average score: 2.3 vs 2.2. Jev 1.14 (default) ina gharama ya chini ya benchmark: $0.003 vs $0.008. Jev 1.14 (default) ni ya haraka zaidi: 377ms vs 4.58s, na pass rates 18.8% vs 23.2%.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-15

Modeli zilizolinganishwa

Nafasi
#413
Jumla ya tokeni za matokeo
164
Muda wa majibu (wastani)
4.58s
Jumla ya gharama
$0.008
Nafasi
#412
Jumla ya tokeni za matokeo
18,927
Muda wa majibu (wastani)
377ms
Jumla ya gharama
$0.003
Muundo unaopendekezwa Jev 1.14 (default)

It has the best score here (2.3), while costing about 2.8x less than Classify-1 (default).

Ulinganisho wa kina

Kipimo Classify-1 Classify-1 default Toleo: 2026-10-13 Jev 1.14 Jev 1.14 default Toleo: 2026-10-15
Alama 2.2 2.3
Nafasi #413 #412
Uaminifu 9.4 10.0
Uthabiti 4.5 4.5
Majaribio 36/69 36/69
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio 18.8% 23.2%
Majaribio yasiyo thabiti 2 2
Jumla ya uendeshaji 36 36
Gharama kwa matokeo 0.261 0.071
Jumla ya gharama $0.008 $0.003
Bei ya ingizo $0.040 / 1M $0.042 / 1M
Bei ya toleo $0.000 / 1M $0.000 / 1M
Bei ya kusoma akiba Haipo Haipo
Bei ya kuandika akiba Haipo Haipo
Jumla ya tokeni za ingizo 195,645 67,092
Tokeni za matokeo 164 18,927
Tokeni za hoja 0 0
Muda wa majibu (wastani) 4.58s 377ms
Muda wa majibu (upeo) 13.35s 546ms
Muda wa majibu (jumla) 55.01s 4.52s
Vigezo ~1B -
Upatikanaji Imefungwa Imefungwa

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Uandishi wa msimbo Alama Uthabiti Kiwango cha kupita kwa kila jaribio Majaribio yasiyo thabiti Majaribio sahihi Muda wa majibu (wastani) Tokeni za ingizo Tokeni za matokeo Tokeni za hoja
Classify-1 2.7 3.7 22.2% 1 12.73s 105,738 50 0
Jev 1.14 2.7 3.9 22.2% 1 403ms 30,072 8,130 0

Badilisha jozi ya ulinganisho

Gemini 3 Flash PreviewhighvsClassify-1defaultGemini 3 Flash PreviewhighvsJev 1.14defaultCommand A+lowvsJev 1.14defaultCommand A+nonevsJev 1.14defaultCommand A+lowvsClassify-1defaultCommand A+nonevsClassify-1defaultCommand A+highvsJev 1.14defaultCommand A+highvsClassify-1defaultCommand A+mediumvsJev 1.14defaultJev 1.14defaultvsGrok 4.20noneCommand A+mediumvsClassify-1defaultClassify-1defaultvsGrok 4.20none