#77 xAI: Grok 4.20
medium- लागत
- $0.041
- समय
- 110.3s
- टोकन
- 16,336 tok
सारांश
Grok 4.20 AI BENCHY पर 6.7 स्कोर करता है और #77 पर है। इसकी reliability 10.0, pass rate 61.7%, कुल लागत $0.832, और औसत response time 19.09s है।
पहचान नोट
Grok 4.20 Beta, Grok 4.20 का प्रीव्यू संस्करण था।
6.7
संगति
8.0
10.0
$0.832
कुल आउटपुट टोकन
158,105
कुल इनपुट टोकन
0
इनपुट कीमत
$1.250 / 1M
आउटपुट कीमत
$2.500 / 1M
अस्थिर टेस्ट
5
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
जनरेशन शोकेस
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-06-04 14:17 नया टेस्ट जोड़ा गया | 7.1 | 10.0 | $0.609 ↓ | तुलना करें | |
| 2026-05-22 00:32 सूट बदला गया | 6.7 | 10.0 | $0.832 | वर्तमान रन | |
| 2026-05-08 15:32 सूट बदला गया | 6.9 | 10.0 | $0.756 | तुलना करें | |
| 2026-04-11 01:44 पहला दर्ज रन | 7.0 | लागू नहीं | $0.743 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:32 · सूट बदला गया | 6.7 | 8.0 | 10.0 | 10/20 | 5 | 158,105 | 0 | $0.832 | 19.09s |
| 2026-04-11 01:44 · पहला दर्ज रन | 7.0 | 7.8 | लागू नहीं | 9/18 | 5 | 111,626 | 0 | $0.743 | 10.33s |
| अंतर | -0.3 | +0.2 | +1 | 0 | +46479 | 0 | +$0.089 | +8767ms |
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 8.2 | 7.9 | |
| कोडिंग | 4.1 | 1.8 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 3.9 | 2.6 | |
| निर्देश पालन | 7.3 | 6.0 | |
| पहेली समाधान | 7.7 | 10.0 | |
| टूल कॉलिंग | 3.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |