Advertise here
#378

North Mini Code

Cohere रिलीज़: 2026-06-18 परीक्षण किया गया: 2026-10-01 02:59 cohere/north-mini-code::none
30B कुल (3B सक्रिय)MoEमुक्त स्रोत
(medium) (default)

सारांश

North Mini Code AI BENCHY पर 4.7 स्कोर करता है और #378 पर है। इसकी reliability 8.9, pass rate 17.4%, कुल लागत $0.000, और औसत response time 29.47s है।

North Mini Code को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

घोषित
पैरामीटर
30B कुल (3B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
लाइसेंस
Apache-2.0

संगति

9.9

कुल आउटपुट टोकन

26,954

कुल इनपुट टोकन

177,989

इनपुट कीमत

$0.000 / 1M

आउटपुट कीमत

$0.000 / 1M

कैश पढ़ने की कीमत

लागू नहीं

कैश लिखने की कीमत

लागू नहीं

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

सही परीक्षण

गलत टेस्ट: 19

प्रति प्रयास पास दर: 17.4%

बेंचमार्क कवरेज: 63/69 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)

अस्थिर टेस्ट

0

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

29.47s

प्रतिक्रिया समय (अधिकतम): 159.85s

प्रतिक्रिया समय (कुल): 677.70s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#378 North Mini Code

default
लागत
$0.000
समय
266.1s
टोकन
63,551 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-10-01 02:59 दोबारा परीक्षण 4.7 8.9 $0.000 वर्तमान रन
2026-07-16 23:19 नया टेस्ट जोड़ा गया 5.1 8.7 $0.000 तुलना करें
2026-06-18 09:42 पहला रन 5.1 8.5 $0.000 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-10-01 02:59 · वर्तमान रन63/69 प्रयास4.79.98.94/23026,954177,989$0.00029.47s
2026-07-16 23:19 · नया टेस्ट जोड़ा गया60/66 प्रयास5.19.98.74/22026,786130,492$0.00029.95s
अंतर—-0.40.0+0.200+168+47497$0.000-481ms

बेंचमार्क कवरेज अलग है: 63/69 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 60/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
स्वायत्त एजेंट कार्य 3.0 10.0
एंटी-एआई ट्रिक्स 3.0 10.0
कोडिंग 3.9 10.0
संयुक्त 3.2 9.3
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.0 10.0
Samanya Buddhimatta 3.9 9.6
निर्देश पालन 6.5 10.0
पहेली समाधान 3.5 10.0
टूल कॉलिंग 9.5 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल