AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#95

MiMo-V2.5

Xiaomi प्रकाशन: 2026-04-22 चाचणी तारीख: 2026-07-16 22:46 xiaomi/mimo-v2.5::medium
310B एकूण (15B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

MiMo-V2.5 AI BENCHY वर 6.5 स्कोर करते आणि #95 वर आहे. याची reliability 10.0, pass rate 69.7%, एकूण खर्च $0.082, आणि सरासरी response time 32.20s आहे.

MiMo-V2.5 खास का आहे: हे अँटी-एआय युक्त्या मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर डेटा पार्सिंग आणि निष्कर्षण हा सर्वात कमकुवत भाग आहे, rank #17.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
310B एकूण (15B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
MIT

सुसंगतता

7.9

एकूण खर्च (सध्याची किंमत)

$0.082 ↓ -78.3%

या किमतीवर चाचणी केली: $0.375

एकूण आउटपुट टोकन्स

237,802

एकूण इनपुट टोकन्स

105,447

इनपुट किंमत

$0.140 / 1M

आउटपुट किंमत

$0.280 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 10

प्रति प्रयत्न पास दर: 69.7%

अस्थिर चाचण्या

6

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

32.20s

प्रतिसाद वेळ (कमाल): 162.44s

प्रतिसाद वेळ (एकूण): 708.46s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#95 MiMo-V2.5

medium
खर्च
$0.002
वेळ
54.8s
टोकन्स
5,247 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:41 पुन्हा चाचणी 6.4 10.0 $0.104 तुलना करा
2026-07-16 22:46 नवीन चाचणी जोडली 6.5 10.0 $0.082 सध्याची रन
2026-06-04 13:56 नवीन चाचणी जोडली 7.3 10.0 $0.063 तुलना करा
2026-05-22 12:59 नवीन चाचणी जोडली 7.4 10.0 $0.346 तुलना करा
2026-05-08 15:28 सूट बदलला 7.8 10.0 $0.253 तुलना करा
2026-04-22 22:54 पहिली नोंदलेली रन 7.8 लागू नाही $0.253 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-07-16 22:46 · नवीन चाचणी जोडली66/66 प्रयत्न6.57.910.012/226237,802105,447$0.08232.20s
2026-06-04 13:56 · नवीन चाचणी जोडली63/63 प्रयत्न7.38.110.012/215201,72541,838$0.06327.11s
फरक-0.8-0.20.00+1+36077+63609+$0.020+5089ms

बेंचमार्क कव्हरेज वेगळे आहे: 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-06-04 15:40 $0.140 / 1M $0.280 / 1M
2026-06-29 01:00 $0.105 / 1M $0.280 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 10.0 10.0
कोडिंग 6.2 4.7
संयुक्त 8.7 6.9
डेटा पार्सिंग आणि निष्कर्षण 2.7 5.7
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 5.4 2.5
सूचनांचे पालन 9.9 10.0
कोडी सोडवणे 8.2 7.2
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स