नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Inception: Mercury 2 vs Elephant Alpha

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-05-29

मेट्रिक Mercury 2 Mercury 2 medium रिलीज़: 2026-02-24 Elephant Alpha Elephant Alpha none रिलीज़: 2026-04-14
स्कोर 6.5 5.2
रैंक #92 #136
विश्वसनीयता 10.0 लागू नहीं
संगति 8.8 9.6
सही परीक्षण
प्रति प्रयास पास दर 51.7% 29.8%
अस्थिर टेस्ट 3 1
कुल रन 60 60
प्रति परिणाम लागत 0.611 0.000
कुल लागत $0.055 $0.000
इनपुट कीमत $0.250 / 1M $0.000 / 1M
आउटपुट कीमत $0.750 / 1M $0.000 / 1M
आउटपुट टोकन 4,022 2,573
रीजनिंग टोकन 58,405 0
प्रतिक्रिया समय (औसत) 2.27s 1.22s
प्रतिक्रिया समय (अधिकतम) 14.63s 3.81s
प्रतिक्रिया समय (कुल) 43.20s 22.03s

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

एंटी-एआई ट्रिक्स स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Mercury 2 6.9 9.9 50.0% 0 1.12s 2,546 2,609
Elephant Alpha 6.6 10.0 50.0% 0 963ms 610 0
कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Mercury 2 7.2 6.5 66.7% 1 2.29s 270 8,514
Elephant Alpha 4.7 6.7 33.3% 1 1.39s 375 0
संयुक्त स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Mercury 2 10.0 10.0 100.0% 0 3.28s 268 4,887
Elephant Alpha 3.0 10.0 0.0% 0 3.81s 731 0
डेटा पार्सिंग और निष्कर्षण स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Mercury 2 7.3 5.9 83.3% 1 1.11s 183 1,656
Elephant Alpha 6.5 10.0 50.0% 0 1.04s 246 0
डोमेन-विशिष्ट स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Mercury 2 2.9 7.2 11.1% 1 6.48s 41 30,754
Elephant Alpha 3.0 10.0 0.0% 0 927ms 24 0
Samanya Buddhimatta स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Mercury 2 4.8 10.0 0.0% 0 821ms 137 542
Elephant Alpha 4.0 10.0 0.0% 0 854ms 106 0
निर्देश पालन स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Mercury 2 10.0 10.0 100.0% 0 1.07s 14 958
Elephant Alpha 9.8 10.0 100.0% 0 1.03s 81 0
पहेली समाधान स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Mercury 2 5.4 10.0 33.3% 0 949ms 361 2,781
Elephant Alpha 4.2 10.0 0.0% 0 807ms 170 0
टूल कॉलिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Mercury 2 10.0 10.0 100.0% 0 1.89s 180 1,956
Elephant Alpha 3.0 10.0 0.0% 0 2.79s 230 0
सामान्य ज्ञान स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Mercury 2 3.0 10.0 0.0% 0 2.58s 22 3,748
Elephant Alpha 0.0 0.0 0.0% 0 0ms 0 0

त्वरित तुलना

तुलना जोड़ी बदलें