#378 North Mini Code
default- लागत
- $0.000
- समय
- 266.1s
- टोकन
- 63,551 tok
सारांश
North Mini Code AI BENCHY पर 4.7 स्कोर करता है और #378 पर है। इसकी reliability 8.9, pass rate 17.4%, कुल लागत $0.000, और औसत response time 29.47s है।
North Mini Code को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।
शोध की तारीख: 2026-08-12
4.7
संगति
9.9
8.9
$0.000
कुल आउटपुट टोकन
26,954
कुल इनपुट टोकन
177,989
इनपुट कीमत
$0.000 / 1M
आउटपुट कीमत
$0.000 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
गलत टेस्ट: 19
प्रति प्रयास पास दर: 17.4%
बेंचमार्क कवरेज: 63/69 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)
अस्थिर टेस्ट
0
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-10-01 02:59 दोबारा परीक्षण | 4.7 | 8.9 | $0.000 | वर्तमान रन | |
| 2026-07-16 23:19 नया टेस्ट जोड़ा गया | 5.1 | 8.7 | $0.000 | तुलना करें | |
| 2026-06-18 09:42 पहला रन | 5.1 | 8.5 | $0.000 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 02:59 · वर्तमान रन | 63/69 प्रयास | 4.7 | 9.9 | 8.9 | 4/23 | 0 | 26,954 | 177,989 | $0.000 | 29.47s |
| 2026-07-16 23:19 · नया टेस्ट जोड़ा गया | 60/66 प्रयास | 5.1 | 9.9 | 8.7 | 4/22 | 0 | 26,786 | 130,492 | $0.000 | 29.95s |
| अंतर | — | -0.4 | 0.0 | +0.2 | 0 | 0 | +168 | +47497 | $0.000 | -481ms |
बेंचमार्क कवरेज अलग है: 63/69 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 60/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| स्वायत्त एजेंट कार्य | 3.0 | 10.0 | |
| एंटी-एआई ट्रिक्स | 3.0 | 10.0 | |
| कोडिंग | 3.9 | 10.0 | |
| संयुक्त | 3.2 | 9.3 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 3.9 | 9.6 | |
| निर्देश पालन | 6.5 | 10.0 | |
| पहेली समाधान | 3.5 | 10.0 | |
| टूल कॉलिंग | 9.5 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |