AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#178

MiMo-V2.5

Xiaomi प्रकाशन: 2026-04-22 चाचणी तारीख: 2026-08-14 02:41 xiaomi/mimo-v2.5::medium
310B एकूण (15B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

MiMo-V2.5 AI BENCHY वर 6.4 स्कोर करते आणि #178 वर आहे. याची reliability 10.0, pass rate 68.2%, एकूण खर्च $0.104, आणि सरासरी response time 46.28s आहे.

MiMo-V2.5 खास का आहे: हे संयुक्त मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर डेटा पार्सिंग आणि निष्कर्षण हा सर्वात कमकुवत भाग आहे, rank #14.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
310B एकूण (15B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
MIT

सुसंगतता

7.5

एकूण खर्च (सध्याची किंमत)

$0.104 ↓ -73.6%

या किमतीवर चाचणी केली: $0.394

एकूण आउटपुट टोकन्स

327,048

एकूण इनपुट टोकन्स

105,456

इनपुट किंमत

$0.140 / 1M

आउटपुट किंमत

$0.280 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 11

प्रति प्रयत्न पास दर: 68.2%

अस्थिर चाचण्या

7

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

46.28s

प्रतिसाद वेळ (कमाल): 316.27s

प्रतिसाद वेळ (एकूण): 1018.12s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#178 MiMo-V2.5

medium
खर्च
$0.002
वेळ
54.8s
टोकन्स
5,247 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:41 पुन्हा चाचणी 6.4 10.0 $0.104 सध्याची रन
2026-07-16 22:46 नवीन चाचणी जोडली 6.5 10.0 $0.082 तुलना करा
2026-06-04 13:56 नवीन चाचणी जोडली 7.3 10.0 $0.063 तुलना करा
2026-05-22 12:59 नवीन चाचणी जोडली 7.4 10.0 $0.346 तुलना करा
2026-05-08 15:28 सूट बदलला 7.8 10.0 $0.253 तुलना करा
2026-04-22 22:54 पहिली नोंदलेली रन 7.8 लागू नाही $0.253 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-08-14 02:41 · सध्याची रन66/66 प्रयत्न6.47.510.011/227327,048105,456$0.10446.28s
2026-04-22 22:54 · पहिली नोंदलेली रन54/54 प्रयत्न7.88.6लागू नाही12/183119,0820$0.25313.71s
फरक-1.4-1.1-1+4+207966+105456-$0.149+32571ms

बेंचमार्क कव्हरेज वेगळे आहे: 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-06-29 01:00 $0.105 / 1M $0.280 / 1M
2026-08-14 12:51 $0.140 / 1M $0.280 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 10.0 10.0
कोडिंग 6.2 4.7
संयुक्त 8.7 6.9
डेटा पार्सिंग आणि निष्कर्षण 2.7 5.7
डोमेन-विशिष्ट 3.6 7.2
Samanya Buddhimatta 5.4 2.5
सूचनांचे पालन 9.9 10.0
कोडी सोडवणे 8.2 7.2
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स