#52 xAI: Grok 4.20
medium- लागत
- $0.041
- समय
- 110.3s
- टोकन
- 16,336 tok
सारांश
Grok 4.20 AI BENCHY पर 7.0 स्कोर करता है और #52 पर है। इसकी reliability लागू नहीं, pass rate 66.7%, कुल लागत $0.743, और औसत response time 10.33s है।
पहचान नोट
Grok 4.20 Beta, Grok 4.20 का प्रीव्यू संस्करण था।
7.0
संगति
7.8
लागू नहीं
$0.743
कुल आउटपुट टोकन
111,626
कुल इनपुट टोकन
0
इनपुट कीमत
$2.000 / 1M
आउटपुट कीमत
$6.000 / 1M
अस्थिर टेस्ट
5
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
जनरेशन शोकेस
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-06-04 14:17 नया टेस्ट जोड़ा गया | 7.1 | 10.0 | $0.609 ↓ | तुलना करें | |
| 2026-05-22 00:32 सूट बदला गया | 6.7 | 10.0 | $0.832 | तुलना करें | |
| 2026-05-08 15:32 सूट बदला गया | 6.9 | 10.0 | $0.756 | तुलना करें | |
| 2026-04-11 01:44 पहला दर्ज रन | 7.0 | लागू नहीं | $0.743 | वर्तमान रन |
रन तुलना
| रन | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहला दर्ज रन | 7.0 | 7.8 | लागू नहीं | 9/18 | 5 | 111,626 | 0 | $0.743 | 10.33s |
| 2026-05-22 00:32 · सूट बदला गया | 6.7 | 8.0 | 10.0 | 10/20 | 5 | 158,105 | 0 | $0.832 | 19.09s |
| अंतर | +0.3 | -0.2 | -1 | 0 | -46479 | 0 | -$0.089 | -8767ms |
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 8.2 | 7.9 | |
| कोडिंग | 4.3 | 1.1 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 5.8 | 2.8 | |
| निर्देश पालन | 7.3 | 5.9 | |
| पहेली समाधान | 6.4 | 7.7 | |
| टूल कॉलिंग | 3.0 | 10.0 |