नेव्हिगेशन
AI BENCHY
Advertise here

Inception: Mercury 2 vs xAI: Grok 4.20

Grok 4.20 (medium) average score मध्ये पुढे आहे: 7.1 vs 7.0. Mercury 2 (medium) चा benchmark खर्च कमी आहे: $0.093 vs $0.777. Mercury 2 (medium) वेगवान आहे: 2.72s vs 29.47s, pass rates 51.5% vs 63.6%.

शिफारस केलेले मॉडेलMercury 2 (medium)Its score stays close to the best score here (7.0 vs 7.1), while costing about 8.4x less than Grok 4.20 (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-18

मेट्रिक Mercury 2 Mercury 2 medium प्रकाशन: 2026-02-24 Grok 4.20 Grok 4.20 medium प्रकाशन: 2026-03-31
स्कोअर 7.0 7.1
क्रमांक #77 #74
विश्वसनीयता 10.0 10.0
सुसंगतता 8.8 8.5
बरोबर चाचण्या
प्रति प्रयत्न पास दर 51.5% 63.6%
अस्थिर चाचण्या 3 4
एकूण रन 66 66
प्रति निकाल खर्च 0.928 9.709
एकूण खर्च $0.093 $0.777
इनपुट किंमत $0.250 / 1M $1.250 / 1M
आउटपुट किंमत $0.750 / 1M $2.500 / 1M
एकूण इनपुट टोकन्स 109,572 102,791
आउटपुट टोकन्स 10,313 5,363
रिझनिंग टोकन्स 76,806 253,977
प्रतिसाद वेळ (सरासरी) 2.72s 29.47s
प्रतिसाद वेळ (कमाल) 14.63s 199.66s
प्रतिसाद वेळ (एकूण) 57.12s 648.35s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#77 Mercury 2

medium
खर्च
$0.002
वेळ
2.1s
टोकन्स
1,702 tok

#74 xAI: Grok 4.20

medium
खर्च
$0.041
वेळ
110.3s
टोकन्स
16,336 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2 8.2 7.7 77.8% 1 2.04s 7,065 296 11,328
Grok 4.20 6.3 6.6 55.6% 1 109.93s 8,307 268 103,150

झटपट तुलना

तुलना जोडी बदला