Urambazaji
Advertise here

Mammoth 1 (default) vs Clef Omni (default)

Mammoth 1 (default) inaongoza kwa average score: 2.2 vs 1.9. Mammoth 1 (default) ina gharama ya chini ya benchmark: $0.000 vs $0.011. Clef Omni (default) ni ya haraka zaidi: 880ms vs 1.80s, na pass rates 18.8% vs 8.7%.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-10-24

Modeli zilizolinganishwa

Nafasi
#442
Jumla ya tokeni za matokeo
54
Muda wa majibu (wastani)
1.80s
Jumla ya gharama
$0.000
Nafasi
#444
Jumla ya tokeni za matokeo
0
Muda wa majibu (wastani)
880ms
Jumla ya gharama
$0.011
Muundo unaopendekezwa Mammoth 1 (default)

Ina alama ya juu zaidi katika ulinganisho huu (2.2) na uwiano bora zaidi wa gharama na muda wa kujibu kati ya modeli 2.

Ulinganisho wa kina

Kipimo Mammoth 1 Mammoth 1 default Toleo: 2026-10-24 Inapatikana bure Clef Omni Clef Omni default Toleo: 2026-10-12
Alama 2.2 1.9
Nafasi #442 #444
Uaminifu 8.9 10.0
Uthabiti 4.2 5.2
Majaribio 36/69 36/69
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio 18.8% 8.7%
Majaribio yasiyo thabiti 3 0
Jumla ya uendeshaji 36 36
Gharama kwa matokeo 0.000 0.526
Jumla ya gharama $0.000 $0.011
Bei ya ingizo $0.000 / 1M $0.150 / 1M
Bei ya toleo $0.000 / 1M $0.000 / 1M
Bei ya kusoma akiba Haipo Haipo
Bei ya kuandika akiba Haipo Haipo
Jumla ya tokeni za ingizo 45,468 70,125
Tokeni za matokeo 54 0
Tokeni za hoja 0 0
Muda wa majibu (wastani) 1.80s 880ms
Muda wa majibu (upeo) 8.17s 1.31s
Muda wa majibu (jumla) 21.63s 10.56s
Vigezo 27B 30B jumla (3B vinavyotumika)
Upatikanaji Chanzo huria Chanzo huria

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Uandishi wa msimbo Alama Uthabiti Kiwango cha kupita kwa kila jaribio Majaribio yasiyo thabiti Majaribio sahihi Muda wa majibu (wastani) Tokeni za ingizo Tokeni za matokeo Tokeni za hoja
Mammoth 1 4.9 6.7 33.3% 0 951ms 25,497 12 0
Clef Omni 2.5 6.7 0.0% 0 614ms 33,750 0 0

Badilisha jozi ya ulinganisho

Clef OmnidefaultvsGemini 3 Flash PreviewhighMammoth 1defaultInapatikana burevsGemini 3 Flash PreviewhighMammoth 1defaultInapatikana burevsCommand A+lowMammoth 1defaultInapatikana burevsCommand A+noneMammoth 1defaultInapatikana burevsCommand A+highClef OmnidefaultvsCommand A+lowClef OmnidefaultvsCommand A+noneMammoth 1defaultInapatikana burevsXing4.0 29b A4bnoneInapatikana bureMammoth 1defaultInapatikana burevsCommand A+mediumMammoth 1defaultInapatikana burevsGrok 4.20noneClef OmnidefaultvsCommand A+highClef OmnidefaultvsXing4.0 29b A4bnoneInapatikana bure