AI BENCHY
Advertise here
#146

MiMo-V2.5-Pro

Xiaomi रिलीज़: 2026-04-22 परीक्षण किया गया: 2026-07-16 22:42 xiaomi/mimo-v2.5-pro::none
1.02T कुल (42B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

MiMo-V2.5-Pro AI BENCHY पर 5.5 स्कोर करता है और #146 पर है। इसकी reliability 10.0, pass rate 37.9%, कुल लागत $0.068, और औसत response time 4.12s है।

MiMo-V2.5-Pro को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #2 है; जबकि एंटी-एआई ट्रिक्स इसकी सबसे कमजोर जगह है, जहाँ यह #17 पर है। यह समान मॉडलों की तुलना में काफ़ी तेज है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

घोषित
पैरामीटर
1.02T कुल (42B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
लाइसेंस
MIT

संगति

8.6

कुल लागत (वर्तमान कीमत)

$0.068 ↓ -25.2%

परीक्षण के समय: $0.091

कुल आउटपुट टोकन

15,362

कुल इनपुट टोकन

124,799

इनपुट कीमत

$0.435 / 1M

आउटपुट कीमत

$0.870 / 1M

सही परीक्षण

गलत टेस्ट: 16

प्रति प्रयास पास दर: 37.9%

अस्थिर टेस्ट

4

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

4.12s

प्रतिक्रिया समय (अधिकतम): 53.13s

प्रतिक्रिया समय (कुल): 90.55s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#146 MiMo-V2.5-Pro

none
लागत
$0.004
समय
46.4s
टोकन
4,025 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-08-14 02:26 दोबारा परीक्षण 5.4 10.0 $0.068 तुलना करें
2026-07-16 22:42 नया टेस्ट जोड़ा गया 5.5 10.0 $0.068 वर्तमान रन
2026-06-04 13:48 नया टेस्ट जोड़ा गया 5.5 10.0 $0.017 तुलना करें
2026-05-08 15:29 सूट बदला गया 5.7 10.0 $0.035 तुलना करें
2026-04-22 21:39 पहला दर्ज रन 5.8 लागू नहीं $0.033 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-07-16 22:42 · नया टेस्ट जोड़ा गया66/66 प्रयास5.58.610.06/22415,362124,799$0.0684.12s
2026-06-04 13:48 · नया टेस्ट जोड़ा गया63/63 प्रयास5.58.610.06/2143,04330,724$0.0171.78s
अंतर0.00.00.000+12319+94075+$0.052+2334ms

बेंचमार्क कवरेज अलग है: 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 63/63 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

कीमत का इतिहास

OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।

तारीख इनपुट कीमत आउटपुट कीमत
2026-06-04 15:40 $0.435 / 1M $0.870 / 1M

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 3.3 8.1
कोडिंग 4.3 7.8
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 4.0 10.0
निर्देश पालन 6.4 10.0
पहेली समाधान 6.7 4.7
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल