#139 MiMo-V2.5
none- लागत
- $0.007
- समय
- 267.4s
- टोकन
- 25,283 tok
सारांश
MiMo-V2.5 AI BENCHY पर 4.8 स्कोर करता है और #139 पर है। इसकी reliability 10.0, pass rate 26.7%, कुल लागत $0.021, और औसत response time 2.20s है।
MiMo-V2.5 को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
शोध की तारीख: 2026-08-12
4.8
संगति
9.3
10.0
$0.021
कुल आउटपुट टोकन
2,258
कुल इनपुट टोकन
0
इनपुट कीमत
$0.400 / 1M
आउटपुट कीमत
$2.000 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
2
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:25 दोबारा परीक्षण | 5.1 | 10.0 | $0.025 ↓ | तुलना करें | |
| 2026-07-16 22:42 नया टेस्ट जोड़ा गया | 5.1 | 10.0 | $0.025 ↓ | तुलना करें | |
| 2026-06-04 13:48 नया टेस्ट जोड़ा गया | 4.9 | 10.0 | $0.007 ↓ | तुलना करें | |
| 2026-05-22 12:51 नया टेस्ट जोड़ा गया | 4.8 | 10.0 | $0.021 | वर्तमान रन | |
| 2026-05-08 15:33 सूट बदला गया | 4.9 | 10.0 | $0.019 | तुलना करें | |
| 2026-04-22 21:39 पहला दर्ज रन | 5.1 | लागू नहीं | $0.019 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 12:51 · नया टेस्ट जोड़ा गया | 60/60 प्रयास | 4.8 | 9.3 | 10.0 | 4/20 | 2 | 2,258 | 0 | $0.021 | 2.20s |
| 2026-05-08 15:33 · सूट बदला गया | 57/57 प्रयास | 4.9 | 9.2 | 10.0 | 4/19 | 2 | 2,231 | 0 | $0.019 | 2.02s |
| अंतर | — | -0.1 | +0.1 | 0.0 | 0 | 0 | +27 | 0 | +$0.002 | +175ms |
बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 57/57 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 3.5 | 8.0 | |
| कोडिंग | 6.8 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 6.5 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 4.4 | 9.9 | |
| निर्देश पालन | 6.5 | 10.0 | |
| पहेली समाधान | 4.2 | 7.7 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |