#46 xAI: Grok Build 0.1
medium- खर्च
- $0.028
- वेळ
- 81.3s
- टोकन्स
- 14,009 tok
सारांश
Grok Build 0.1 AI BENCHY वर 7.6 स्कोर करते आणि #46 वर आहे. याची reliability 10.0, pass rate 70.0%, एकूण खर्च $0.633, आणि सरासरी response time 26.36s आहे.
Grok Build 0.1 खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #4 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18.
संशोधन दिनांक: 2026-08-12
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
7.6
सुसंगतता
8.5
10.0
$0.633
एकूण आउटपुट टोकन्स
295,603
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$1.000 / 1M
आउटपुट किंमत
$2.000 / 1M
अस्थिर चाचण्या
4
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:58 पुन्हा चाचणी | 7.5 | 10.0 | $1.130 | तुलना करा | |
| 2026-07-16 23:10 नवीन चाचणी जोडली | 7.6 | 10.0 | $1.097 | तुलना करा | |
| 2026-06-04 14:22 नवीन चाचणी जोडली | 7.4 | 10.0 | $0.927 | तुलना करा | |
| 2026-05-26 13:30 पुन्हा चाचणी | 7.7 | 10.0 | $0.729 | तुलना करा | |
| 2026-05-22 00:36 सूट बदलला | 7.6 | 10.0 | $0.633 | सध्याची रन |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:36 · सूट बदलला | 60/60 प्रयत्न | 7.6 | 8.5 | 10.0 | 12/20 | 4 | 295,603 | 0 | $0.633 | 26.36s |
| 2026-05-26 13:30 · पुन्हा चाचणी | 60/60 प्रयत्न | 7.7 | 9.9 | 10.0 | 13/20 | 0 | 343,639 | 0 | $0.729 | 42.39s |
| फरक | — | -0.1 | -1.4 | 0.0 | -1 | +4 | -48036 | 0 | -$0.097 | -16029ms |
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 10.0 | 10.0 | |
| कोडिंग | 5.3 | 2.9 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 3.8 | 2.5 | |
| सूचनांचे पालन | 9.8 | 10.0 | |
| कोडी सोडवणे | 6.2 | 7.5 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |