नेव्हिगेशन
AI BENCHY
Your ad here

AI BENCHY Compare

Inception: Mercury 2 vs Xiaomi: MiMo-V2-Omni

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-05-01

मेट्रिक Mercury 2 Mercury 2 medium प्रकाशन: 2026-02-24 MiMo-V2-Omni MiMo-V2-Omni none प्रकाशन: 2026-03-18
स्कोअर 6.5 6.5
क्रमांक #72 #73
विश्वसनीयता लागू नाही लागू नाही
सुसंगतता 8.6 10.0
बरोबर चाचण्या
प्रति प्रयत्न पास दर 53.7% 44.4%
अस्थिर चाचण्या 3 0
एकूण रन 54 20
प्रति निकाल खर्च 0.580 0.083
एकूण खर्च $0.047 $0.007
???? ??? $0.250 / 1M $0.400 / 1M
????? ??? $0.750 / 1M $2.000 / 1M
आउटपुट टोकन्स 3,972 868
रिझनिंग टोकन्स 48,333 0
प्रतिसाद वेळ (सरासरी) 2.21s 1.99s
प्रतिसाद वेळ (कमाल) 14.63s 6.81s
प्रतिसाद वेळ (एकूण) 37.51s 35.81s

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

अँटी-एआय युक्त्या स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2 6.9 9.9 50.0% 0 1.12s 2,546 2,609
MiMo-V2-Omni 4.8 10.0 25.0% 0 1.10s 74 0
कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2 10.0 10.0 100.0% 0 1.53s 249 2,213
MiMo-V2-Omni 6.6 10.0 0.0% 0 1.72s 399 0
संयुक्त स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2 10.0 10.0 100.0% 0 3.28s 268 4,887
MiMo-V2-Omni 3.0 10.0 0.0% 0 2.47s 110 0
डेटा पार्सिंग आणि निष्कर्षण स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2 7.3 5.9 83.3% 1 1.11s 183 1,656
MiMo-V2-Omni 10.0 10.0 100.0% 0 1.69s 83 0
डोमेन-विशिष्ट स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2 2.9 7.2 11.1% 1 6.48s 41 30,754
MiMo-V2-Omni 5.3 10.0 33.3% 0 1.14s 8 0
Samanya Buddhimatta स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2 4.8 10.0 0.0% 0 821ms 137 542
MiMo-V2-Omni 4.5 10.0 0.0% 0 1.19s 37 0
सूचनांचे पालन स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2 10.0 10.0 100.0% 0 1.07s 14 958
MiMo-V2-Omni 6.5 10.0 50.0% 0 4.18s 22 0
कोडी सोडवणे स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2 3.9 7.5 22.2% 1 934ms 354 2,758
MiMo-V2-Omni 8.0 10.0 66.7% 0 2.71s 58 0
टूल कॉलिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mercury 2 10.0 10.0 100.0% 0 1.89s 180 1,956
MiMo-V2-Omni 10.0 10.0 100.0% 0 2.76s 77 0

झटपट तुलना

तुलना जोडी बदला