#46 MiMo-V2-Flash
medium
अवैध SVG
- खर्च
- $0.020
- वेळ
- 284.1s
- टोकन्स
- 65,689 tok
Xiaomi
प्रकाशन: 2025-12-16
चाचणी तारीख: 2026-04-11 01:44
xiaomi/mimo-v2-flash::medium
(medium)
(none)
सारांश
MiMo-V2-Flash AI BENCHY वर 7.5 स्कोर करते आणि #46 वर आहे. याची reliability लागू नाही, pass rate 70.4%, एकूण खर्च $0.038, आणि सरासरी response time 23.36s आहे.
MiMo-V2-Flash खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #17. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.
संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.
7.5
सुसंगतता
8.6
लागू नाही
$0.038
एकूण आउटपुट टोकन्स
127,569
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.090 / 1M
आउटपुट किंमत
$0.290 / 1M
अस्थिर चाचण्या
3
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
जनरेशन शोकेस
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-06-04 13:48 नवीन चाचणी जोडली | 7.2 | 10.0 | $0.043 ↑ | तुलना करा | |
| 2026-05-22 00:20 सूट बदलला | 7.1 | 10.0 | $0.038 | तुलना करा | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 7.5 | लागू नाही | $0.038 | सध्याची रन |
रन तुलना
| रन | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहिली नोंदलेली रन | 7.5 | 8.6 | लागू नाही | 11/18 | 3 | 127,569 | 0 | $0.038 | 23.36s |
| 2026-06-04 13:48 · नवीन चाचणी जोडली | 7.2 | 8.8 | 10.0 | 12/21 | 3 | 137,515 | 40,111 | $0.043 | 20.11s |
| फरक | +0.3 | -0.2 | -1 | 0 | -9946 | -40111 | -$0.006 | +3255ms |
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 8.1 | 7.9 | |
| कोडिंग | 4.7 | 1.6 | |
| संयुक्त | 9.8 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 6.5 | 10.0 | |
| डोमेन-विशिष्ट | 5.9 | 7.2 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| सूचनांचे पालन | 10.0 | 10.0 | |
| कोडी सोडवणे | 7.7 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 |