AI BENCHY
Advertise here
#159

North Mini Code

Cohere प्रकाशन: 2026-06-18 चाचणी तारीख: 2026-07-16 23:46 cohere/north-mini-code::medium
(medium) (none)

सारांश

North Mini Code AI BENCHY वर 5.9 स्कोर करते आणि #159 वर आहे. याची reliability 8.6, pass rate 48.5%, एकूण खर्च $0.000, आणि सरासरी response time 137.11s आहे.

North Mini Code खास का आहे: हे अँटी-एआय युक्त्या मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #3 आहे; तर कोडी सोडवणे हा सर्वात कमकुवत भाग आहे, rank #10. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. हे असामान्यपणे जास्त reasoning tokens वापरते, ज्यामुळे runs हळू किंवा महाग होऊ शकतात.

सुसंगतता

8.5

एकूण आउटपुट टोकन्स

1,766,801

एकूण इनपुट टोकन्स

81,813

इनपुट किंमत

$0.000 / 1M

आउटपुट किंमत

$0.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 13

प्रति प्रयत्न पास दर: 48.5%

बेंचमार्क कव्हरेज: 22/22 चाचण्या · 58/66 प्रयत्न

अस्थिर चाचण्या

4

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

137.11s

प्रतिसाद वेळ (कमाल): 786.72s

प्रतिसाद वेळ (एकूण): 3016.42s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#159 North Mini Code

medium
खर्च
$0.000
वेळ
51.8s
टोकन्स
12,460 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-07-16 23:46 नवीन चाचणी जोडली 5.9 8.6 $0.000 सध्याची रन
2026-06-18 09:44 पहिला रन 5.8 8.5 $0.000 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-07-16 23:46 · सध्याची रन22/22 चाचण्या · 58/66 प्रयत्न5.98.58.69/2241,766,80181,813$0.000137.11s
2026-06-18 09:44 · पहिला रन21/21 चाचण्या · 55/63 प्रयत्न5.88.58.59/2141,446,26132,891$0.000106.18s
फरक0.00.0+0.100+320540+48922$0.000+30934ms

बेंचमार्क कव्हरेज वेगळे आहे: 22/22 चाचण्या · 58/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 21/21 चाचण्या · 55/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-06-18 09:34 $0.000 / 1M $0.000 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 8.4 10.0
कोडिंग 4.5 4.9
संयुक्त 2.9 5.8
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.3 7.2
Samanya Buddhimatta 5.1 10.0
सूचनांचे पालन 9.8 10.0
कोडी सोडवणे 3.3 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स