#149 MiMo-V2-Flash
none- खर्च
- $0.001
- वेळ
- 7.7s
- टोकन्स
- 1,481 tok
सारांश
MiMo-V2-Flash AI BENCHY वर 4.4 स्कोर करते आणि #149 वर आहे. याची reliability 10.0, pass rate 25.0%, एकूण खर्च $0.024, आणि सरासरी response time 2.64s आहे.
संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.
संशोधन दिनांक: 2026-08-12
4.4
सुसंगतता
8.0
10.0
$0.024
एकूण आउटपुट टोकन्स
68,562
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.100 / 1M
आउटपुट किंमत
$0.300 / 1M
अस्थिर चाचण्या
5
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-06-04 13:47 नवीन चाचणी जोडली | 4.0 | 6.7 | $0.025 ↑ | तुलना करा | |
| 2026-05-22 00:20 सूट बदलला | 4.4 | 10.0 | $0.024 | सध्याची रन | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 4.5 | लागू नाही | $0.023 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:20 · सूट बदलला | 60/60 प्रयत्न | 4.4 | 8.0 | 10.0 | 3/20 | 5 | 68,562 | 0 | $0.024 | 2.64s |
| 2026-04-11 01:44 · पहिली नोंदलेली रन | 54/54 प्रयत्न | 4.5 | 7.8 | लागू नाही | 3/18 | 5 | 68,522 | 0 | $0.023 | 2.79s |
| फरक | — | -0.1 | +0.2 | 0 | 0 | +40 | 0 | +$0.001 | -155ms |
बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 3.2 | 8.0 | |
| कोडिंग | 4.9 | 6.9 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 2.9 | 5.8 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 4.6 | 10.0 | |
| सूचनांचे पालन | 6.5 | 10.0 | |
| कोडी सोडवणे | 3.6 | 7.2 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |