#40 MiMo-V2-Omni
medium
This model has been deprecated. It is recommended to migrate to xiaomi/mimo-v2.5
- खर्च
- $0.000
- वेळ
- 0.1s
- टोकन्स
- 0 tok
Xiaomi
प्रकाशन: 2026-03-18
चाचणी तारीख: 2026-04-11 01:44
xiaomi/mimo-v2-omni::medium
(medium)
(none)
सारांश
Mimo V2 Omni AI BENCHY वर 7.7 स्कोर करते आणि #40 वर आहे. याची reliability लागू नाही, pass rate 61.1%, एकूण खर्च $0.153, आणि सरासरी response time 16.76s आहे.
Mimo V2 Omni खास का आहे: हे संयुक्त मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18.
संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.
7.7
सुसंगतता
9.9
लागू नाही
$0.153
एकूण आउटपुट टोकन्स
73,589
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.400 / 1M
आउटपुट किंमत
$2.000 / 1M
अस्थिर चाचण्या
0
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-06-04 13:47 नवीन चाचणी जोडली | 5.9 | 10.0 | $0.683 ↓ | तुलना करा | |
| 2026-05-22 00:27 सूट बदलला | 6.9 | 10.0 | $0.734 | तुलना करा | |
| 2026-05-08 15:32 सूट बदलला | 7.2 | 10.0 | $0.451 | तुलना करा | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 7.7 | लागू नाही | $0.153 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहिली नोंदलेली रन | 18/18 चाचण्या · 20/54 प्रयत्न | 7.7 | 9.9 | लागू नाही | 11/18 | 0 | 73,589 | 0 | $0.153 | 16.76s |
| 2026-06-04 13:47 · नवीन चाचणी जोडली | 21/21 चाचण्या · 55/63 प्रयत्न | 5.9 | 8.3 | 10.0 | 10/21 | 3 | 359,258 | 37,007 | $0.683 | 41.16s |
| फरक | — | +1.8 | +1.6 | +1 | -3 | -285669 | -37007 | -$0.531 | -24407ms |
बेंचमार्क कव्हरेज वेगळे आहे: 18/18 चाचण्या · 20/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 21/21 चाचण्या · 55/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 10.0 | 10.0 | |
| कोडिंग | 4.0 | 7.9 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| सूचनांचे पालन | 8.3 | 10.0 | |
| कोडी सोडवणे | 6.5 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 |