Urambazaji
Advertise here

Nimble v3 9B (default) vs Clef Omni (default)

Clef Omni (default) inaongoza kwa average score: 1.9 vs 0.8. Nimble v3 9B (default) ina gharama ya chini ya benchmark: ~$0.001 vs $0.011. Nimble v3 9B (default) ni ya haraka zaidi: 363ms vs 880ms, na pass rates 4.4% vs 8.7%.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-16

Modeli zilizolinganishwa

Nafasi
#430
Jumla ya tokeni za matokeo
0
Muda wa majibu (wastani)
363ms
Jumla ya gharama
~$0.001
Nafasi
#421
Jumla ya tokeni za matokeo
0
Muda wa majibu (wastani)
880ms
Jumla ya gharama
$0.011
Muundo unaopendekezwa Clef Omni (default)

Ina alama ya juu zaidi katika ulinganisho huu (1.9) na uwiano bora zaidi wa gharama na muda wa kujibu kati ya modeli 2.

Ulinganisho wa kina

Kipimo Nimble v3 9B Nimble v3 9B default Toleo: 2026-10-16 Clef Omni Clef Omni default Toleo: 2026-10-12
Alama 0.8 1.9
Nafasi #430 #421
Uaminifu 10.0 10.0
Uthabiti 3.0 5.2
Majaribio 21/69 36/69
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio 4.4% 8.7%
Majaribio yasiyo thabiti 0 0
Jumla ya uendeshaji 21 36
Gharama kwa matokeo ~0.027 0.526
Jumla ya gharama ~$0.001 $0.011
Bei ya ingizo Haipo $0.150 / 1M
Bei ya toleo Haipo $0.000 / 1M
Bei ya kusoma akiba Haipo Haipo
Bei ya kuandika akiba Haipo Haipo
Jumla ya tokeni za ingizo 103,770 70,125
Tokeni za matokeo 0 0
Tokeni za hoja 0 0
Muda wa majibu (wastani) 363ms 880ms
Muda wa majibu (upeo) 1.24s 1.31s
Muda wa majibu (jumla) 2.54s 10.56s
Vigezo 9B 30B jumla (3B vinavyotumika)
Upatikanaji Uzani unapatikana Chanzo huria

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Uandishi wa msimbo Alama Uthabiti Kiwango cha kupita kwa kila jaribio Majaribio yasiyo thabiti Majaribio sahihi Muda wa majibu (wastani) Tokeni za ingizo Tokeni za matokeo Tokeni za hoja
Nimble v3 9B 0.0 0.0 0.0% 0 0ms 0 0 0
Clef Omni 2.5 6.7 0.0% 0 614ms 33,750 0 0

Badilisha jozi ya ulinganisho

Clef OmnidefaultvsGemini 3 Flash PreviewhighClef OmnidefaultvsCommand A+lowNimble v3 9BdefaultvsGemini 3 Flash PreviewhighClef OmnidefaultvsCommand A+noneClef OmnidefaultvsCommand A+highClef OmnidefaultvsCommand A+mediumClef OmnidefaultvsGrok 4.20noneClef OmnidefaultvsLing 3.0 TinymediumClef OmnidefaultvsLing 3.0 TinylowClef OmnidefaultvsLing 3.0 TinyhighClef OmnidefaultvsNemotron 3.5 LightningnoneInapatikana bureClef OmnidefaultvsQwen3.5-9Bmedium