AI BENCHY
Advertise here
#149

MiMo-V2-Flash

Xiaomi प्रकाशन: 2025-12-16 चाचणी तारीख: 2026-05-22 00:20 xiaomi/mimo-v2-flash::none
309B एकूण (15B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

MiMo-V2-Flash AI BENCHY वर 4.4 स्कोर करते आणि #149 वर आहे. याची reliability 10.0, pass rate 25.0%, एकूण खर्च $0.024, आणि सरासरी response time 2.64s आहे.

संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
309B एकूण (15B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
MIT

सुसंगतता

8.0

एकूण आउटपुट टोकन्स

68,562

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.100 / 1M

आउटपुट किंमत

$0.300 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 17

प्रति प्रयत्न पास दर: 25.0%

अस्थिर चाचण्या

5

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

2.64s

प्रतिसाद वेळ (कमाल): 19.68s

प्रतिसाद वेळ (एकूण): 42.19s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#149 MiMo-V2-Flash

none
खर्च
$0.001
वेळ
7.7s
टोकन्स
1,481 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-06-04 13:47 नवीन चाचणी जोडली 4.0 6.7 $0.025 तुलना करा
2026-05-22 00:20 सूट बदलला 4.4 10.0 $0.024 सध्याची रन
2026-04-11 01:44 पहिली नोंदलेली रन 4.5 लागू नाही $0.023 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-05-22 00:20 · सूट बदलला60/60 प्रयत्न4.48.010.03/20568,5620$0.0242.64s
2026-04-11 01:44 · पहिली नोंदलेली रन54/54 प्रयत्न4.57.8लागू नाही3/18568,5220$0.0232.79s
फरक-0.1+0.200+400+$0.001-155ms

बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 3.2 8.0
कोडिंग 4.9 6.9
संयुक्त 3.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 2.9 5.8
डोमेन-विशिष्ट 5.3 7.2
Samanya Buddhimatta 4.6 10.0
सूचनांचे पालन 6.5 10.0
कोडी सोडवणे 3.6 7.2
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स