AI BENCHY
Advertise here
#138

MiMo-V2.5

Xiaomi प्रकाशन: 2026-04-22 चाचणी तारीख: 2026-05-08 15:33 xiaomi/mimo-v2.5::none
310B एकूण (15B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

MiMo-V2.5 AI BENCHY वर 4.9 स्कोर करते आणि #138 वर आहे. याची reliability 10.0, pass rate 28.1%, एकूण खर्च $0.019, आणि सरासरी response time 2.02s आहे.

MiMo-V2.5 खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
310B एकूण (15B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
MIT

सुसंगतता

9.2

एकूण आउटपुट टोकन्स

2,231

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.400 / 1M

आउटपुट किंमत

$2.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 15

प्रति प्रयत्न पास दर: 28.1%

अस्थिर चाचण्या

2

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

2.02s

प्रतिसाद वेळ (कमाल): 6.86s

प्रतिसाद वेळ (एकूण): 38.45s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#138 MiMo-V2.5

none
खर्च
$0.007
वेळ
267.4s
टोकन्स
25,283 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:25 पुन्हा चाचणी 5.1 10.0 $0.025 तुलना करा
2026-07-16 22:42 नवीन चाचणी जोडली 5.1 10.0 $0.025 तुलना करा
2026-06-04 13:48 नवीन चाचणी जोडली 4.9 10.0 $0.007 तुलना करा
2026-05-22 12:51 नवीन चाचणी जोडली 4.8 10.0 $0.021 तुलना करा
2026-05-08 15:33 सूट बदलला 4.9 10.0 $0.019 सध्याची रन
2026-04-22 21:39 पहिली नोंदलेली रन 5.1 लागू नाही $0.019 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-05-08 15:33 · सूट बदलला57/57 प्रयत्न4.99.210.04/1922,2310$0.0192.02s
2026-07-16 22:42 · नवीन चाचणी जोडली66/66 प्रयत्न5.19.610.05/22116,464141,043$0.0254.62s
फरक-0.2-0.40.0-1+1-14233-141043-$0.006-2593ms

बेंचमार्क कव्हरेज वेगळे आहे: 57/57 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 3.5 8.0
कोडिंग 10.0 10.0
संयुक्त 3.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 6.5 10.0
डोमेन-विशिष्ट 3.0 10.0
Samanya Buddhimatta 4.4 9.9
सूचनांचे पालन 6.5 10.0
कोडी सोडवणे 4.2 7.7
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स