नेव्हिगेशन
AI BENCHY
Your ad here

AI BENCHY Compare

Google: Gemma 4 31B vs Xiaomi: MiMo-V2.5

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-04-22

मेट्रिक Gemma 4 31B Gemma 4 31B none प्रकाशन: 2026-04-02 मोफत उपलब्ध MiMo-V2.5 MiMo-V2.5 medium प्रकाशन: 2026-04-22
स्कोअर 6.9 7.8
क्रमांक #50 #35
सुसंगतता 10.0 8.6
बरोबर चाचण्या
प्रति प्रयत्न पास दर 55.6% 74.1%
अस्थिर चाचण्या 0 3
एकूण रन 54 54
प्रति निकाल खर्च 0.024 2.102
एकूण खर्च $0.003 $0.253
???? ??? $0.130 / 1M $0.400 / 1M
????? ??? $0.380 / 1M $2.000 / 1M
आउटपुट टोकन्स 1,359 2,840
रिझनिंग टोकन्स 0 116,242
प्रतिसाद वेळ (सरासरी) 4.02s 13.71s
प्रतिसाद वेळ (कमाल) 26.13s 86.93s
प्रतिसाद वेळ (एकूण) 64.33s 246.73s

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

अँटी-एआय युक्त्या स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 31B 6.5 10.0 50.0% 0 1.85s 45 0
MiMo-V2.5 10.0 10.0 100.0% 0 1.98s 303 2,022
कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 31B 10.0 10.0 100.0% 0 26.13s 699 0
MiMo-V2.5 10.0 10.0 100.0% 0 31.48s 488 14,813
संयुक्त स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0
MiMo-V2.5 10.0 10.0 100.0% 0 16.86s 363 7,609
डेटा पार्सिंग आणि निष्कर्षण स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 31B 10.0 10.0 100.0% 0 2.25s 285 0
MiMo-V2.5 2.7 5.7 16.7% 1 6.33s 306 5,714
डोमेन-विशिष्ट स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 31B 7.7 10.0 66.7% 0 3.22s 27 0
MiMo-V2.5 5.3 10.0 33.3% 0 34.53s 507 49,478
Samanya Buddhimatta स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 31B 10.0 10.0 100.0% 0 2.09s 117 0
MiMo-V2.5 3.8 2.5 33.3% 1 1.55s 118 170
सूचनांचे पालन स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 31B 6.5 10.0 50.0% 0 2.84s 78 0
MiMo-V2.5 9.9 10.0 100.0% 0 1.80s 88 801
कोडी सोडवणे स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 31B 5.5 10.0 33.3% 0 2.95s 108 0
MiMo-V2.5 8.2 7.2 88.9% 1 20.60s 364 33,211
टूल कॉलिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0
MiMo-V2.5 10.0 10.0 100.0% 0 7.29s 303 2,424

झटपट तुलना

तुलना जोडी बदला