#44 xAI: Grok Build 0.1
medium- लागत
- $0.028
- समय
- 81.3s
- टोकन
- 14,009 tok
सारांश
Grok Build 0.1 AI BENCHY पर 7.6 स्कोर करता है और #44 पर है। इसकी reliability 10.0, pass rate 61.9%, कुल लागत $0.927, और औसत response time 49.90s है।
Grok Build 0.1 को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #3 है; जबकि कोडिंग इसकी सबसे कमजोर जगह है, जहाँ यह #13 पर है। यह असामान्य रूप से अधिक reasoning tokens इस्तेमाल करता है, जिससे धीमे या महंगे runs समझ में आ सकते हैं।
7.6
संगति
9.9
10.0
$0.927
कुल आउटपुट टोकन
440,800
कुल इनपुट टोकन
44,418
इनपुट कीमत
$1.000 / 1M
आउटपुट कीमत
$2.000 / 1M
अस्थिर टेस्ट
0
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
जनरेशन शोकेस
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-06-04 14:22 नया टेस्ट जोड़ा गया | 7.4 | 10.0 | $0.927 | वर्तमान रन | |
| 2026-05-26 13:30 दोबारा परीक्षण | 7.7 | 10.0 | $0.729 | तुलना करें | |
| 2026-05-22 00:36 सूट बदला गया | 7.6 | 10.0 | $0.633 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-06-04 14:22 · वर्तमान रन | 7.6 | 9.9 | 10.0 | 13/21 | 0 | 440,800 | 44,418 | $0.927 | 49.90s |
| 2026-05-26 13:30 · दोबारा परीक्षण | 7.7 | 9.9 | 10.0 | 13/20 | 0 | 343,639 | 0 | $0.729 | 42.39s |
| अंतर | -0.1 | 0.0 | 0.0 | 0 | 0 | +97161 | +44418 | +$0.198 | +7513ms |
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
कीमत का इतिहास
OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।
| तारीख | इनपुट कीमत | आउटपुट कीमत |
|---|---|---|
| 2026-06-04 15:40 | $1.000 / 1M | $2.000 / 1M |
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 8.3 | 10.0 | |
| कोडिंग | 5.7 | 9.7 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 4.4 | 9.9 | |
| निर्देश पालन | 9.8 | 10.0 | |
| पहेली समाधान | 7.7 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |