#90 Mistral Small 4
none- लागत
- $0.002
- समय
- 10.4s
- टोकन
- 2,370 tok
Mistral
रिलीज़: 2026-03-16
परीक्षण किया गया: 2026-04-11 01:44
mistralai/mistral-small-2603::none
119B कुल (6B सक्रिय)MoEमुक्त स्रोत
(medium)
(none)
सारांश
Mistral Small 4 AI BENCHY पर 5.2 स्कोर करता है और #90 पर है। इसकी reliability लागू नहीं, pass rate 31.5%, कुल लागत $0.006, और औसत response time 665ms है।
Mistral Small 4 को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #4 है; जबकि एंटी-एआई ट्रिक्स इसकी सबसे कमजोर जगह है, जहाँ यह #18 पर है। इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- 119B कुल (6B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- मुक्त स्रोत
- लाइसेंस
- Apache-2.0
5.2
संगति
9.5
लागू नहीं
$0.006
कुल आउटपुट टोकन
2,207
कुल इनपुट टोकन
0
इनपुट कीमत
$0.150 / 1M
आउटपुट कीमत
$0.600 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
1
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:04 दोबारा परीक्षण | 5.1 | 10.0 | $0.022 | तुलना करें | |
| 2026-07-16 22:21 नया टेस्ट जोड़ा गया | 5.1 | 10.0 | $0.022 | तुलना करें | |
| 2026-06-04 13:41 नया टेस्ट जोड़ा गया | 4.9 | 10.0 | $0.007 | तुलना करें | |
| 2026-05-22 00:14 सूट बदला गया | 5.0 | 10.0 | $0.007 | तुलना करें | |
| 2026-04-11 01:44 पहला दर्ज रन | 5.2 | लागू नहीं | $0.006 | वर्तमान रन |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहला दर्ज रन | 54/54 प्रयास | 5.2 | 9.5 | लागू नहीं | 5/18 | 1 | 2,207 | 0 | $0.006 | 665ms |
| 2026-08-14 02:04 · दोबारा परीक्षण | 66/66 प्रयास | 5.1 | 9.6 | 10.0 | 5/22 | 1 | 9,812 | 104,717 | $0.022 | 1.20s |
| अंतर | — | +0.1 | -0.1 | 0 | 0 | -7605 | -104717 | -$0.016 | -535ms |
बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Mistral Small 4nonevsMistral Small 4mediumMistral Small 4nonevsMercury 2.5lowMistral Small 4nonevsKAT Coder AIR V2.5highMistral Small 4nonevsKAT Coder AIR V2.5mediumMistral Small 4nonevsNemotron 3.5 Lightninghighनिःशुल्क उपलब्धMistral Small 4nonevsMiMo-V2.5-PrononeMistral Small 4nonevsLing 3.0 FlashnoneMistral Small 4nonevsApodex 1.1 Minidefaultनिःशुल्क उपलब्धMistral Small 4nonevsInkling Smalllowनिःशुल्क उपलब्धMistral Small 4nonevsLaguna S 2.1mediumनिःशुल्क उपलब्ध
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 3.4 | 7.9 | |
| कोडिंग | 4.5 | 9.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| निर्देश पालन | 6.5 | 10.0 | |
| पहेली समाधान | 3.1 | 9.9 | |
| टूल कॉलिंग | 10.0 | 10.0 |