#121 Mistral Small 4
medium- लागत
- $0.006
- समय
- 47.9s
- टोकन
- 9,857 tok
Mistral
रिलीज़: 2026-03-16
परीक्षण किया गया: 2026-05-22 00:16
mistralai/mistral-small-2603::medium
119B कुल (6B सक्रिय)MoEमुक्त स्रोत
(medium)
(none)
सारांश
Mistral Small 4 AI BENCHY पर 5.4 स्कोर करता है और #121 पर है। इसकी reliability 10.0, pass rate 45.0%, कुल लागत $0.056, और औसत response time 8.33s है।
Mistral Small 4 को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #4 है; जबकि कोडिंग इसकी सबसे कमजोर जगह है, जहाँ यह #18 पर है। इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- 119B कुल (6B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- मुक्त स्रोत
- लाइसेंस
- Apache-2.0
5.4
संगति
7.1
10.0
$0.056
कुल आउटपुट टोकन
89,683
कुल इनपुट टोकन
0
इनपुट कीमत
$0.150 / 1M
आउटपुट कीमत
$0.600 / 1M
अस्थिर टेस्ट
7
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:05 दोबारा परीक्षण | 5.1 | 10.0 | $0.097 | तुलना करें | |
| 2026-07-16 22:23 नया टेस्ट जोड़ा गया | 5.1 | 10.0 | $0.096 | तुलना करें | |
| 2026-06-04 13:43 नया टेस्ट जोड़ा गया | 5.3 | 10.0 | $0.068 | तुलना करें | |
| 2026-05-22 00:16 सूट बदला गया | 5.4 | 10.0 | $0.056 | वर्तमान रन | |
| 2026-04-11 01:44 पहला दर्ज रन | 5.7 | लागू नहीं | $0.034 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:16 · सूट बदला गया | 60/60 प्रयास | 5.4 | 7.1 | 10.0 | 5/20 | 7 | 89,683 | 0 | $0.056 | 8.33s |
| 2026-08-14 02:05 · दोबारा परीक्षण | 66/66 प्रयास | 5.1 | 7.0 | 10.0 | 5/22 | 8 | 133,597 | 140,559 | $0.097 | 10.80s |
| अंतर | — | +0.3 | +0.1 | 0.0 | 0 | -1 | -43914 | -140559 | -$0.041 | -2471ms |
बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Mistral Small 4mediumvsMistral Small 4noneMistral Small 4mediumvsGranite 4.2 8BlowMistral Small 4mediumvsNemotron 3.5 Lightningmediumनिःशुल्क उपलब्धMistral Small 4mediumvsQwen3 Coder NextnoneMistral Small 4mediumvsGranite 4.2 8BmediumMistral Small 4mediumvsMercury 2.5lowMistral Small 4mediumvsInklingnoneMistral Small 4mediumvsMiMo-V2.5noneMistral Small 4mediumvsDots 3 Note Previewnoneनिःशुल्क उपलब्धMistral Small 4mediumvsQwen3.5-9Bnone
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 5.6 | 3.8 | |
| कोडिंग | 5.1 | 6.8 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 7.3 | 5.9 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 4.8 | 10.0 | |
| निर्देश पालन | 7.3 | 5.8 | |
| पहेली समाधान | 3.4 | 9.7 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |