#89 SpaceXAI: Grok Build 0.1
medium- खर्च
- $0.028
- वेळ
- 81.3s
- टोकन्स
- 14,009 tok
सारांश
Grok Build 0.1 AI BENCHY वर 7.5 स्कोर करते आणि #89 वर आहे. याची reliability 10.0, pass rate 60.6%, एकूण खर्च $1.130, आणि सरासरी response time 54.50s आहे.
Grok Build 0.1 खास का आहे: हे संयुक्त मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर Samanya Buddhimatta हा सर्वात कमकुवत भाग आहे, rank #17. हे असामान्यपणे जास्त reasoning tokens वापरते, ज्यामुळे runs हळू किंवा महाग होऊ शकतात.
संशोधन दिनांक: 2026-08-12
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
7.5
सुसंगतता
9.6
10.0
$1.130
एकूण आउटपुट टोकन्स
511,406
एकूण इनपुट टोकन्स
106,946
इनपुट किंमत
$1.000 / 1M
आउटपुट किंमत
$2.000 / 1M
अस्थिर चाचण्या
1
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:58 पुन्हा चाचणी | 7.5 | 10.0 | $1.130 | सध्याची रन | |
| 2026-07-16 23:10 नवीन चाचणी जोडली | 7.6 | 10.0 | $1.097 | तुलना करा | |
| 2026-06-04 14:22 नवीन चाचणी जोडली | 7.4 | 10.0 | $0.927 | तुलना करा | |
| 2026-05-26 13:30 पुन्हा चाचणी | 7.7 | 10.0 | $0.729 | तुलना करा | |
| 2026-05-22 00:36 सूट बदलला | 7.6 | 10.0 | $0.633 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-08-14 02:58 · सध्याची रन | 66/66 प्रयत्न | 7.5 | 9.6 | 10.0 | 13/22 | 1 | 511,406 | 106,946 | $1.130 | 54.50s |
| 2026-05-26 13:30 · पुन्हा चाचणी | 60/60 प्रयत्न | 7.7 | 9.9 | 10.0 | 13/20 | 0 | 343,639 | 0 | $0.729 | 42.39s |
| फरक | — | -0.2 | -0.3 | 0.0 | 0 | +1 | +167767 | +106946 | +$0.401 | +12115ms |
बेंचमार्क कव्हरेज वेगळे आहे: 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत |
|---|---|---|
| 2026-08-14 12:51 | $1.000 / 1M | $2.000 / 1M |
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 8.3 | 10.0 | |
| कोडिंग | 5.7 | 9.7 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 2.9 | 7.2 | |
| Samanya Buddhimatta | 4.4 | 9.9 | |
| सूचनांचे पालन | 9.8 | 10.0 | |
| कोडी सोडवणे | 7.7 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |