Mammoth 1 (default) vs Clef Omni (default)

Mammoth 1 (default) average score मध्ये पुढे आहे: 2.2 vs 1.9. Mammoth 1 (default) चा benchmark खर्च कमी आहे: $0.000 vs $0.011. Clef Omni (default) वेगवान आहे: 880ms vs 1.80s, pass rates 18.8% vs 8.7%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-24

तुलना केलेली मॉडेल्स

क्रमांक: #442
एकूण आउटपुट टोकन्स: 54
प्रतिसाद वेळ (सरासरी): 1.80s
एकूण खर्च: $0.000

क्रमांक: #444
एकूण आउटपुट टोकन्स: 0
प्रतिसाद वेळ (सरासरी): 880ms
एकूण खर्च: $0.011

शिफारस केलेले मॉडेल Mammoth 1 (default)

या तुलनेत याचा गुण सर्वाधिक आहे (2.2) आणि 2 मॉडेल्समध्ये खर्च व प्रतिसाद वेळ यांचा एकूण समतोल सर्वोत्तम आहे.

तपशीलवार तुलना

मेट्रिक	Mammoth 1 Mammoth 1 default प्रकाशन: 2026-10-24 मोफत उपलब्ध	Clef Omni Clef Omni default प्रकाशन: 2026-10-12

मेट्रिक	Mammoth 1 Mammoth 1 default प्रकाशन: 2026-10-24 मोफत उपलब्ध	Clef Omni Clef Omni default प्रकाशन: 2026-10-12
स्कोअर	2.2	1.9
क्रमांक	#442	#444
विश्वसनीयता	8.9	10.0
सुसंगतता	4.2	5.2
प्रयत्न	36/69	36/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	18.8%	8.7%
अस्थिर चाचण्या	3	0
एकूण रन	36	36
प्रति निकाल खर्च	0.000	0.526
एकूण खर्च	$0.000	$0.011
इनपुट किंमत	$0.000 / 1M	$0.150 / 1M
आउटपुट किंमत	$0.000 / 1M	$0.000 / 1M
कॅश वाचण्याची किंमत	लागू नाही	लागू नाही
कॅश लिहिण्याची किंमत	लागू नाही	लागू नाही
एकूण इनपुट टोकन्स	45,468	70,125
आउटपुट टोकन्स	54	0
रिझनिंग टोकन्स	0	0
प्रतिसाद वेळ (सरासरी)	1.80s	880ms
प्रतिसाद वेळ (कमाल)	8.17s	1.31s
प्रतिसाद वेळ (एकूण)	21.63s	10.56s
पॅरामीटर्स	27B	30B एकूण (3B सक्रिय)
उपलब्धता	मुक्त स्रोत	मुक्त स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mammoth 1	0.0	0.0	0.0%	0		0ms	0	0	0
Clef Omni	0.0	0.0	0.0%	0		0ms	0	0	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mammoth 1	4.0	7.5	25.0%	0		530ms	8,373	9	0
Clef Omni	4.0	7.5	25.0%	0		861ms	12,810	0	0

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mammoth 1	4.9	6.7	33.3%	0		951ms	25,497	12	0
Clef Omni	2.5	6.7	0.0%	0		614ms	33,750	0	0

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mammoth 1	0.0	0.0	0.0%	0		0ms	0	0	0
Clef Omni	0.0	0.0	0.0%	0		0ms	0	0	0

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mammoth 1	3.7	1.7	50.0%	2		6.10s	5,565	7	0
Clef Omni	6.5	10.0	50.0%	0		1.06s	13,545	0	0

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mammoth 1	5.3	10.0	33.3%	0		531ms	3,120	9	0
Clef Omni	3.0	10.0	0.0%	0		1.05s	4,485	0	0

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mammoth 1	0.0	0.0	0.0%	0		0ms	0	0	0
Clef Omni	0.0	0.0	0.0%	0		0ms	0	0	0

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mammoth 1	1.5	5.0	0.0%	0		4.04s	2,376	14	0
Clef Omni	1.5	5.0	0.0%	0		904ms	4,893	0	0

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mammoth 1	1.6	1.0	11.1%	1		298ms	537	3	0
Clef Omni	1.7	3.3	0.0%	0		572ms	642	0	0

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mammoth 1	0.0	0.0	0.0%	0		0ms	0	0	0
Clef Omni	0.0	0.0	0.0%	0		0ms	0	0	0

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Mammoth 1	0.0	0.0	0.0%	0		0ms	0	0	0
Clef Omni	0.0	0.0	0.0%	0		0ms	0	0	0

तुलना जोडी बदला

Clef OmnidefaultvsGemini 3 Flash Previewhigh Mammoth 1defaultमोफत उपलब्धvsGemini 3 Flash Previewhigh Mammoth 1defaultमोफत उपलब्धvsCommand A+low Mammoth 1defaultमोफत उपलब्धvsCommand A+none Mammoth 1defaultमोफत उपलब्धvsCommand A+high Clef OmnidefaultvsCommand A+low Clef OmnidefaultvsCommand A+none Mammoth 1defaultमोफत उपलब्धvsXing4.0 29b A4bnoneमोफत उपलब्ध Mammoth 1defaultमोफत उपलब्धvsCommand A+medium Mammoth 1defaultमोफत उपलब्धvsGrok 4.20none Clef OmnidefaultvsCommand A+high Clef OmnidefaultvsXing4.0 29b A4bnoneमोफत उपलब्ध