#103 MiMo-V2-Flash
none- खर्च
- $0.001
- वेळ
- 7.7s
- टोकन्स
- 1,481 tok
Xiaomi
प्रकाशन: 2025-12-16
चाचणी तारीख: 2026-04-11 01:44
xiaomi/mimo-v2-flash::none
309B एकूण (15B सक्रिय)MoEमुक्त स्रोत
(medium)
(none)
सारांश
MiMo-V2-Flash AI BENCHY वर 4.5 स्कोर करते आणि #103 वर आहे. याची reliability लागू नाही, pass rate 27.8%, एकूण खर्च $0.023, आणि सरासरी response time 2.79s आहे.
MiMo-V2-Flash खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #3 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.
संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- 309B एकूण (15B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- मुक्त स्रोत
- परवाना
- MIT
4.5
सुसंगतता
7.8
लागू नाही
$0.023
एकूण आउटपुट टोकन्स
68,522
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.090 / 1M
आउटपुट किंमत
$0.290 / 1M
अस्थिर चाचण्या
5
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-06-04 13:47 नवीन चाचणी जोडली | 4.0 | 6.7 | $0.025 ↑ | तुलना करा | |
| 2026-05-22 00:20 सूट बदलला | 4.4 | 10.0 | $0.024 | तुलना करा | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 4.5 | लागू नाही | $0.023 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहिली नोंदलेली रन | 54/54 प्रयत्न | 4.5 | 7.8 | लागू नाही | 3/18 | 5 | 68,522 | 0 | $0.023 | 2.79s |
| 2026-06-04 13:47 · नवीन चाचणी जोडली | 63/63 प्रयत्न | 4.0 | 8.1 | 6.7 | 4/21 | 4 | 68,882 | 36,851 | $0.025 | 2.76s |
| फरक | — | +0.5 | -0.3 | -1 | +1 | -360 | -36851 | -$0.002 | +28ms |
बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 3.2 | 8.0 | |
| कोडिंग | 6.3 | 3.7 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 2.9 | 5.8 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 4.6 | 10.0 | |
| सूचनांचे पालन | 6.5 | 10.0 | |
| कोडी सोडवणे | 3.6 | 7.2 | |
| टूल कॉलिंग | 10.0 | 10.0 |