AI BENCHY
Advertise here
#95

MiMo-V2.5

Xiaomi प्रकाशन: 2026-04-22 चाचणी तारीख: 2026-04-22 21:39 xiaomi/mimo-v2.5::none
310B एकूण (15B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

MiMo-V2.5 AI BENCHY वर 5.1 स्कोर करते आणि #95 वर आहे. याची reliability लागू नाही, pass rate 27.8%, एकूण खर्च $0.019, आणि सरासरी response time 1.05s आहे.

MiMo-V2.5 खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #17. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
310B एकूण (15B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
MIT

सुसंगतता

10.0

विश्वसनीयता

लागू नाही

एकूण आउटपुट टोकन्स

2,177

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.400 / 1M

आउटपुट किंमत

$2.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 13

प्रति प्रयत्न पास दर: 27.8%

अस्थिर चाचण्या

0

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

1.05s

प्रतिसाद वेळ (कमाल): 2.43s

प्रतिसाद वेळ (एकूण): 18.94s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#95 MiMo-V2.5

none
खर्च
$0.007
वेळ
267.4s
टोकन्स
25,283 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:25 पुन्हा चाचणी 5.1 10.0 $0.025 तुलना करा
2026-07-16 22:42 नवीन चाचणी जोडली 5.1 10.0 $0.025 तुलना करा
2026-06-04 13:48 नवीन चाचणी जोडली 4.9 10.0 $0.007 तुलना करा
2026-05-22 12:51 नवीन चाचणी जोडली 4.8 10.0 $0.021 तुलना करा
2026-05-08 15:33 सूट बदलला 4.9 10.0 $0.019 तुलना करा
2026-04-22 21:39 पहिली नोंदलेली रन 5.1 लागू नाही $0.019 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-04-22 21:39 · पहिली नोंदलेली रन54/54 प्रयत्न5.110.0लागू नाही5/1802,1770$0.0191.05s
2026-08-14 02:25 · पुन्हा चाचणी66/66 प्रयत्न5.19.210.05/22216,464141,052$0.0254.68s
फरक0.0+0.80-2-14287-141052-$0.006-3630ms

बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 4.8 10.0
कोडिंग 10.0 10.0
संयुक्त 3.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 6.5 10.0
डोमेन-विशिष्ट 3.0 10.0
Samanya Buddhimatta 4.6 10.0
सूचनांचे पालन 6.5 10.0
कोडी सोडवणे 3.4 10.0
टूल कॉलिंग 10.0 10.0

तुलना केलेली मॉडेल्स