AI BENCHY
Advertise here
#272

MiMo-V2-Flash

Xiaomi प्रकाशन: 2025-12-16 चाचणी तारीख: 2026-06-04 13:47 xiaomi/mimo-v2-flash::none
309B एकूण (15B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

MiMo-V2-Flash AI BENCHY वर 4.0 स्कोर करते आणि #272 वर आहे. याची reliability 6.7, pass rate 24.2%, एकूण खर्च $0.025, आणि सरासरी response time 2.76s आहे.

MiMo-V2-Flash खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #9.

संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
309B एकूण (15B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
MIT

सुसंगतता

8.1

एकूण खर्च (सध्याची किंमत)

$0.025 ↑ +4.2%

या किमतीवर चाचणी केली: $0.024

एकूण आउटपुट टोकन्स

68,882

एकूण इनपुट टोकन्स

36,851

इनपुट किंमत

$0.100 / 1M

आउटपुट किंमत

$0.300 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 17

प्रति प्रयत्न पास दर: 24.2%

अस्थिर चाचण्या

4

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

2.76s

प्रतिसाद वेळ (कमाल): 19.68s

प्रतिसाद वेळ (एकूण): 46.99s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#272 MiMo-V2-Flash

none
खर्च
$0.001
वेळ
7.7s
टोकन्स
1,481 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-06-04 13:47 नवीन चाचणी जोडली 4.0 6.7 $0.025 सध्याची रन
2026-05-22 00:20 सूट बदलला 4.4 10.0 $0.024 तुलना करा
2026-04-11 01:44 पहिली नोंदलेली रन 4.5 लागू नाही $0.023 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-06-04 13:47 · सध्याची रन63/66 प्रयत्न4.08.16.74/21468,88236,851$0.0252.76s
2026-05-22 00:20 · सूट बदलला60/60 प्रयत्न4.48.010.03/20568,5620$0.0242.64s
फरक-0.4+0.1-3.3+1-1+320+36851+$0.002+127ms

बेंचमार्क कव्हरेज वेगळे आहे: 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-06-04 15:40 $0.100 / 1M $0.300 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 3.2 8.0
कोडिंग 4.3 7.9
संयुक्त 1.5 5.0
डेटा पार्सिंग आणि निष्कर्षण 2.9 5.8
डोमेन-विशिष्ट 5.3 7.2
Samanya Buddhimatta 4.6 10.0
सूचनांचे पालन 6.5 10.0
कोडी सोडवणे 5.3 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स