नेव्हिगेशन
Advertise here

Clef Omni (default) vs Decider V1.1 27B (default)

Decider V1.1 27B (default) average score मध्ये पुढे आहे: 2.6 vs 1.9. Decider V1.1 27B (default) चा benchmark खर्च कमी आहे: $0.002 vs $0.011. Decider V1.1 27B (default) वेगवान आहे: 320ms vs 880ms, pass rates 8.7% vs 17.4%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-12

तुलना केलेली मॉडेल्स

क्रमांक
#402
एकूण आउटपुट टोकन्स
0
प्रतिसाद वेळ (सरासरी)
880ms
एकूण खर्च
$0.011
क्रमांक
#398
एकूण आउटपुट टोकन्स
69
प्रतिसाद वेळ (सरासरी)
320ms
एकूण खर्च
$0.002
शिफारस केलेले मॉडेल Decider V1.1 27B (default)

It has the best score here (2.6), while costing about 7.2x less than Clef Omni (default).

तपशीलवार तुलना

मेट्रिक Clef Omni Clef Omni default प्रकाशन: 2026-10-12 Decider V1.1 27B Decider V1.1 27B default प्रकाशन: 2026-10-07
स्कोअर 1.9 2.6
क्रमांक #402 #398
विश्वसनीयता 10.0 10.0
सुसंगतता 5.2 5.2
प्रयत्न 36/69 36/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर 8.7% 17.4%
अस्थिर चाचण्या 0 0
एकूण रन 36 36
प्रति निकाल खर्च 0.526 0.037
एकूण खर्च $0.011 $0.002
इनपुट किंमत $0.150 / 1M $0.020 / 1M
आउटपुट किंमत $0.000 / 1M $0.000 / 1M
कॅश वाचण्याची किंमत लागू नाही लागू नाही
कॅश लिहिण्याची किंमत लागू नाही लागू नाही
एकूण इनपुट टोकन्स 70,125 73,557
आउटपुट टोकन्स 0 69
रिझनिंग टोकन्स 0 0
प्रतिसाद वेळ (सरासरी) 880ms 320ms
प्रतिसाद वेळ (कमाल) 1.31s 491ms
प्रतिसाद वेळ (एकूण) 10.56s 3.84s
पॅरामीटर्स 30B एकूण (3B सक्रिय) 27B
उपलब्धता मुक्त स्रोत मुक्त स्रोत

कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Clef Omni 2.5 6.7 0.0% 0 614ms 33,750 0 0
Decider V1.1 27B 4.9 6.7 33.3% 0 305ms 32,733 12 0

तुलना जोडी बदला

Clef OmnidefaultvsGemini 3 Flash PreviewhighCommand A+lowvsDecider V1.1 27BdefaultCommand A+nonevsDecider V1.1 27BdefaultCommand A+highvsDecider V1.1 27BdefaultGemini 3 Flash PreviewhighvsDecider V1.1 27BdefaultCommand A+mediumvsDecider V1.1 27BdefaultDecider V1.1 27BdefaultvsGrok 4.20noneClef OmnidefaultvsCommand A+lowClef OmnidefaultvsCommand A+noneLing 3.0 TinymediumvsDecider V1.1 27BdefaultLing 3.0 TinylowvsDecider V1.1 27BdefaultLing 3.0 TinyhighvsDecider V1.1 27Bdefault