AI BENCHY
Advertise here
#40

Mimo V2 Omni

Xiaomi प्रकाशन: 2026-03-18 चाचणी तारीख: 2026-04-11 01:44 xiaomi/mimo-v2-omni::medium
(medium) (none)

सारांश

Mimo V2 Omni AI BENCHY वर 7.7 स्कोर करते आणि #40 वर आहे. याची reliability लागू नाही, pass rate 61.1%, एकूण खर्च $0.153, आणि सरासरी response time 16.76s आहे.

Mimo V2 Omni खास का आहे: हे संयुक्त मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18.

संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.

सुसंगतता

9.9

विश्वसनीयता

लागू नाही

एकूण आउटपुट टोकन्स

73,589

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.400 / 1M

आउटपुट किंमत

$2.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 7

प्रति प्रयत्न पास दर: 61.1%

अस्थिर चाचण्या

0

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

16.76s

प्रतिसाद वेळ (कमाल): 158.78s

प्रतिसाद वेळ (एकूण): 301.61s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#40 MiMo-V2-Omni

medium
This model has been deprecated. It is recommended to migrate to xiaomi/mimo-v2.5
खर्च
$0.000
वेळ
0.1s
टोकन्स
0 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-06-04 13:47 नवीन चाचणी जोडली 5.9 10.0 $0.683 तुलना करा
2026-05-22 00:27 सूट बदलला 6.9 10.0 $0.734 तुलना करा
2026-05-08 15:32 सूट बदलला 7.2 10.0 $0.451 तुलना करा
2026-04-11 01:44 पहिली नोंदलेली रन 7.7 लागू नाही $0.153 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-04-11 01:44 · पहिली नोंदलेली रन18/18 चाचण्या · 20/54 प्रयत्न7.79.9लागू नाही11/18073,5890$0.15316.76s
2026-05-08 15:32 · सूट बदलला19/19 चाचण्या · 49/57 प्रयत्न7.29.110.010/192218,5770$0.45127.58s
फरक+0.5+0.8+1-2-1449880-$0.299-10825ms

बेंचमार्क कव्हरेज वेगळे आहे: 18/18 चाचण्या · 20/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 19/19 चाचण्या · 49/57 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 10.0 10.0
कोडिंग 4.0 7.9
संयुक्त 10.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.0 10.0
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 8.3 10.0
कोडी सोडवणे 6.5 10.0
टूल कॉलिंग 10.0 10.0

तुलना केलेली मॉडेल्स