AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#52

Grok 4.20

X AI प्रकाशन: 2026-03-31 चाचणी तारीख: 2026-04-11 01:44 x-ai/grok-4.20::medium
~1T एकूण (~100B सक्रिय)MoEबंद स्रोतअंदाजित
(medium) (none)

सारांश

Grok 4.20 AI BENCHY वर 7.0 स्कोर करते आणि #52 वर आहे. याची reliability लागू नाही, pass rate 66.7%, एकूण खर्च $0.743, आणि सरासरी response time 10.33s आहे.

Grok 4.20 खास का आहे: हे संयुक्त मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

ओळख नोंद

Grok 4.20 Beta हे Grok 4.20 ची प्रीव्ह्यू आवृत्ती होती.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~1T एकूण (~100B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

7.8

विश्वसनीयता

लागू नाही

एकूण आउटपुट टोकन्स

111,626

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$2.000 / 1M

आउटपुट किंमत

$6.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 9

प्रति प्रयत्न पास दर: 66.7%

अस्थिर चाचण्या

5

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

10.33s

प्रतिसाद वेळ (कमाल): 29.87s

प्रतिसाद वेळ (एकूण): 185.87s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#52 xAI: Grok 4.20

medium
खर्च
$0.041
वेळ
110.3s
टोकन्स
16,336 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:57 पुन्हा चाचणी 7.0 10.0 $0.805 तुलना करा
2026-07-16 23:07 नवीन चाचणी जोडली 7.1 10.0 $0.777 तुलना करा
2026-06-04 14:17 नवीन चाचणी जोडली 7.1 10.0 $0.609 तुलना करा
2026-05-22 00:32 सूट बदलला 6.7 10.0 $0.832 तुलना करा
2026-05-08 15:32 सूट बदलला 6.9 10.0 $0.756 तुलना करा
2026-04-11 01:44 पहिली नोंदलेली रन 7.0 लागू नाही $0.743 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-04-11 01:44 · पहिली नोंदलेली रन54/54 प्रयत्न7.07.8लागू नाही9/185111,6260$0.74310.33s
2026-05-22 00:32 · सूट बदलला60/60 प्रयत्न6.78.010.010/205158,1050$0.83219.09s
फरक+0.3-0.2-10-464790-$0.089-8767ms

बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 8.2 7.9
कोडिंग 4.3 1.1
संयुक्त 10.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 5.8 2.8
सूचनांचे पालन 7.3 5.9
कोडी सोडवणे 6.4 7.7
टूल कॉलिंग 3.0 10.0

तुलना केलेली मॉडेल्स