#334 North Mini Code
medium- खर्च
- $0.000
- वेळ
- 51.8s
- टोकन्स
- 12,460 tok
Cohere
प्रकाशन: 2026-06-18
चाचणी तारीख: 2026-10-01 03:03
cohere/north-mini-code::medium
30B एकूण (3B सक्रिय)MoEमुक्त स्रोत
(medium)
(default)
सारांश
North Mini Code AI BENCHY वर 5.4 स्कोर करते आणि #334 वर आहे. याची reliability 8.9, pass rate 42.0%, एकूण खर्च $0.000, आणि सरासरी response time 140.39s आहे.
North Mini Code खास का आहे: हे अँटी-एआय युक्त्या मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #2 आहे; तर डोमेन-विशिष्ट हा सर्वात कमकुवत भाग आहे, rank #14. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. हे असामान्यपणे जास्त reasoning tokens वापरते, ज्यामुळे runs हळू किंवा महाग होऊ शकतात.
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- 30B एकूण (3B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- मुक्त स्रोत
- परवाना
- Apache-2.0
5.4
सुसंगतता
8.6
8.9
$0.000
एकूण आउटपुट टोकन्स
1,359,341
एकूण इनपुट टोकन्स
166,347
इनपुट किंमत
$0.000 / 1M
आउटपुट किंमत
$0.000 / 1M
कॅश वाचण्याची किंमत
लागू नाही
कॅश लिहिण्याची किंमत
लागू नाही
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
चुकीच्या चाचण्या: 15
प्रति प्रयत्न पास दर: 42.0%
बेंचमार्क कव्हरेज: 61/69 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती)
अस्थिर चाचण्या
4
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-10-01 03:03 पुन्हा चाचणी | 5.4 | 8.9 | $0.000 | सध्याची रन | |
| 2026-07-16 23:46 नवीन चाचणी जोडली | 5.9 | 8.6 | $0.000 | तुलना करा | |
| 2026-06-18 09:44 पहिला रन | 5.8 | 8.5 | $0.000 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 03:03 · सध्याची रन | 61/69 प्रयत्न | 5.4 | 8.6 | 8.9 | 8/23 | 4 | 1,359,341 | 166,347 | $0.000 | 140.39s |
| 2026-07-16 23:46 · नवीन चाचणी जोडली | 58/66 प्रयत्न | 5.9 | 8.5 | 8.6 | 9/22 | 4 | 1,766,801 | 81,813 | $0.000 | 137.11s |
| फरक | — | -0.5 | +0.1 | +0.3 | -1 | 0 | -407460 | +84534 | $0.000 | +3285ms |
बेंचमार्क कव्हरेज वेगळे आहे: 61/69 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 58/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
North Mini Codemediumमोफत उपलब्धvsQwen3.8 27Bnoneमोफत उपलब्धNorth Mini Codemediumमोफत उपलब्धvsHy4 previewlowNorth Mini Codemediumमोफत उपलब्धvsSeed-2.0-CodenoneNorth Mini Codemediumमोफत उपलब्धvsMiMo-V2.6-FlashnoneNorth Mini Codemediumमोफत उपलब्धvsGemma 4 26B A4Bnoneमोफत उपलब्धNorth Mini Codemediumमोफत उपलब्धvsStep 3.5 FlashmediumNorth Mini Codemediumमोफत उपलब्धvsGPT-6 LunanoneNorth Mini Codemediumमोफत उपलब्धvsEmber-1noneNorth Mini Codemediumमोफत उपलब्धvsGemini 2.5 FlashnoneNorth Mini Codemediumमोफत उपलब्धvsGPT-5.6 Lunanone
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| स्वायत्त एजंट कार्ये | 3.9 | 9.6 | |
| अँटी-एआय युक्त्या | 8.4 | 10.0 | |
| कोडिंग | 4.5 | 4.9 | |
| संयुक्त | 2.9 | 5.8 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 2.9 | 7.2 | |
| Samanya Buddhimatta | 5.1 | 10.0 | |
| सूचनांचे पालन | 9.8 | 10.0 | |
| कोडी सोडवणे | 3.3 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |