AI BENCHY
Advertise here
#272

MiMo-V2-Flash

Xiaomi रिलीज़: 2025-12-16 परीक्षण किया गया: 2026-06-04 13:47 xiaomi/mimo-v2-flash::none
309B कुल (15B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

MiMo-V2-Flash AI BENCHY पर 4.0 स्कोर करता है और #272 पर है। इसकी reliability 6.7, pass rate 24.2%, कुल लागत $0.025, और औसत response time 2.76s है।

MiMo-V2-Flash को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि एंटी-एआई ट्रिक्स इसकी सबसे कमजोर जगह है, जहाँ यह #9 पर है।

संग्रहीत मॉडल: इस मॉडल को अब अपडेट नहीं किया जाएगा और नए परीक्षणों में टेस्ट नहीं किया जाएगा।

मॉडल विवरण

शोध की तारीख: 2026-08-12

घोषित
पैरामीटर
309B कुल (15B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
लाइसेंस
MIT

संगति

8.1

कुल लागत (वर्तमान कीमत)

$0.025 ↑ +4.2%

परीक्षण के समय: $0.024

कुल आउटपुट टोकन

68,882

कुल इनपुट टोकन

36,851

इनपुट कीमत

$0.100 / 1M

आउटपुट कीमत

$0.300 / 1M

सही परीक्षण

गलत टेस्ट: 17

प्रति प्रयास पास दर: 24.2%

अस्थिर टेस्ट

4

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

2.76s

प्रतिक्रिया समय (अधिकतम): 19.68s

प्रतिक्रिया समय (कुल): 46.99s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#272 MiMo-V2-Flash

none
लागत
$0.001
समय
7.7s
टोकन
1,481 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-06-04 13:47 नया टेस्ट जोड़ा गया 4.0 6.7 $0.025 वर्तमान रन
2026-05-22 00:20 सूट बदला गया 4.4 10.0 $0.024 तुलना करें
2026-04-11 01:44 पहला दर्ज रन 4.5 लागू नहीं $0.023 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-06-04 13:47 · वर्तमान रन63/66 प्रयास4.08.16.74/21468,88236,851$0.0252.76s
2026-05-22 00:20 · सूट बदला गया60/60 प्रयास4.48.010.03/20568,5620$0.0242.64s
अंतर-0.4+0.1-3.3+1-1+320+36851+$0.002+127ms

बेंचमार्क कवरेज अलग है: 63/63 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

कीमत का इतिहास

OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।

तारीख इनपुट कीमत आउटपुट कीमत
2026-06-04 15:40 $0.100 / 1M $0.300 / 1M

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 3.2 8.0
कोडिंग 4.3 7.9
संयुक्त 1.5 5.0
डेटा पार्सिंग और निष्कर्षण 2.9 5.8
डोमेन-विशिष्ट 5.3 7.2
Samanya Buddhimatta 4.6 10.0
निर्देश पालन 6.5 10.0
पहेली समाधान 5.3 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल