#149 MiMo-V2-Flash
none- लागत
- $0.001
- समय
- 7.7s
- टोकन
- 1,481 tok
सारांश
MiMo-V2-Flash AI BENCHY पर 4.4 स्कोर करता है और #149 पर है। इसकी reliability 10.0, pass rate 25.0%, कुल लागत $0.024, और औसत response time 2.64s है।
MiMo-V2-Flash को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
संग्रहीत मॉडल: इस मॉडल को अब अपडेट नहीं किया जाएगा और नए परीक्षणों में टेस्ट नहीं किया जाएगा।
शोध की तारीख: 2026-08-12
4.4
संगति
8.0
10.0
$0.024
कुल आउटपुट टोकन
68,562
कुल इनपुट टोकन
0
इनपुट कीमत
$0.100 / 1M
आउटपुट कीमत
$0.300 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
5
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-06-04 13:47 नया टेस्ट जोड़ा गया | 4.0 | 6.7 | $0.025 ↑ | तुलना करें | |
| 2026-05-22 00:20 सूट बदला गया | 4.4 | 10.0 | $0.024 | वर्तमान रन | |
| 2026-04-11 01:44 पहला दर्ज रन | 4.5 | लागू नहीं | $0.023 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:20 · सूट बदला गया | 60/60 प्रयास | 4.4 | 8.0 | 10.0 | 3/20 | 5 | 68,562 | 0 | $0.024 | 2.64s |
| 2026-06-04 13:47 · नया टेस्ट जोड़ा गया | 63/63 प्रयास | 4.0 | 8.1 | 6.7 | 4/21 | 4 | 68,882 | 36,851 | $0.025 | 2.76s |
| अंतर | — | +0.4 | -0.1 | +3.3 | -1 | +1 | -320 | -36851 | -$0.002 | -127ms |
बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 63/63 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 3.2 | 8.0 | |
| कोडिंग | 4.9 | 6.9 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 2.9 | 5.8 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 4.6 | 10.0 | |
| निर्देश पालन | 6.5 | 10.0 | |
| पहेली समाधान | 3.6 | 7.2 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |