#57 xAI: Grok 4.1 Fast
medium- खर्च
- $0.000
- वेळ
- 0.1s
- टोकन्स
- 0 tok
सारांश
Grok 4.1 Fast AI BENCHY वर 6.7 स्कोर करते आणि #57 वर आहे. याची reliability लागू नाही, pass rate 64.8%, एकूण खर्च $0.056, आणि सरासरी response time 23.88s आहे.
Grok 4.1 Fast खास का आहे: हे संयुक्त मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.
संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.
संशोधन दिनांक: 2026-08-12
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
6.7
सुसंगतता
7.2
लागू नाही
$0.056
एकूण आउटपुट टोकन्स
93,308
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.200 / 1M
आउटपुट किंमत
$0.500 / 1M
अस्थिर चाचण्या
6
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-05-08 13:52 पुन्हा चाचणी | 4.7 | 10.0 | $0.069 ↑ | तुलना करा | |
| 2026-05-08 13:52 पुन्हा चाचणी | 4.7 | 10.0 | $0.069 ↑ | तुलना करा | |
| 2026-05-08 13:52 पुन्हा चाचणी | 6.5 | 10.0 | $0.069 ↑ | तुलना करा | |
| 2026-05-08 13:52 पुन्हा चाचणी | 6.5 | 10.0 | $0.058 | तुलना करा | |
| 2026-05-08 13:52 सूट बदलला | 6.5 | 10.0 | $0.058 | तुलना करा | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 6.7 | लागू नाही | $0.056 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहिली नोंदलेली रन | 54/54 प्रयत्न | 6.7 | 7.2 | लागू नाही | 9/18 | 6 | 93,308 | 0 | $0.056 | 23.88s |
| 2026-05-08 13:52 · पुन्हा चाचणी | 57/57 प्रयत्न | 6.5 | 7.3 | 10.0 | 9/19 | 6 | 98,704 | 0 | $0.058 | 24.01s |
| फरक | — | +0.2 | -0.1 | 0 | 0 | -5396 | 0 | -$0.003 | -137ms |
बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 57/57 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 8.7 | 7.9 | |
| कोडिंग | 2.3 | 1.1 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.8 | 4.4 | |
| Samanya Buddhimatta | 4.2 | 9.9 | |
| सूचनांचे पालन | 6.6 | 10.0 | |
| कोडी सोडवणे | 5.3 | 7.2 | |
| टूल कॉलिंग | 2.8 | 1.6 |