#79 Mistral Small 4
medium- लागत
- $0.006
- समय
- 47.9s
- टोकन
- 9,857 tok
Mistral
रिलीज़: 2026-03-16
परीक्षण किया गया: 2026-04-11 01:44
mistralai/mistral-small-2603::medium
119B कुल (6B सक्रिय)MoEमुक्त स्रोत
(medium)
(none)
सारांश
Mistral Small 4 AI BENCHY पर 5.7 स्कोर करता है और #79 पर है। इसकी reliability लागू नहीं, pass rate 50.0%, कुल लागत $0.034, और औसत response time 5.64s है।
Mistral Small 4 को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- 119B कुल (6B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- मुक्त स्रोत
- लाइसेंस
- Apache-2.0
5.7
संगति
6.8
लागू नहीं
$0.034
कुल आउटपुट टोकन
54,492
कुल इनपुट टोकन
0
इनपुट कीमत
$0.150 / 1M
आउटपुट कीमत
$0.600 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
7
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:05 दोबारा परीक्षण | 5.1 | 10.0 | $0.097 | तुलना करें | |
| 2026-07-16 22:23 नया टेस्ट जोड़ा गया | 5.1 | 10.0 | $0.096 | तुलना करें | |
| 2026-06-04 13:43 नया टेस्ट जोड़ा गया | 5.3 | 10.0 | $0.068 | तुलना करें | |
| 2026-05-22 00:16 सूट बदला गया | 5.4 | 10.0 | $0.056 | तुलना करें | |
| 2026-04-11 01:44 पहला दर्ज रन | 5.7 | लागू नहीं | $0.034 | वर्तमान रन |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहला दर्ज रन | 54/54 प्रयास | 5.7 | 6.8 | लागू नहीं | 5/18 | 7 | 54,492 | 0 | $0.034 | 5.64s |
| 2026-07-16 22:23 · नया टेस्ट जोड़ा गया | 66/66 प्रयास | 5.1 | 7.0 | 10.0 | 5/22 | 8 | 131,824 | 140,494 | $0.096 | 10.77s |
| अंतर | — | +0.5 | -0.2 | 0 | -1 | -77332 | -140494 | -$0.062 | -5130ms |
बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Mistral Small 4mediumvsKAT Coder AIR V2.5highMistral Small 4mediumvsMistral Small 4noneMistral Small 4mediumvsNemotron 3.5 Lightninghighनिःशुल्क उपलब्धMistral Small 4mediumvsMercury 2.5lowMistral Small 4mediumvsLing 3.0 FlashnoneMistral Small 4mediumvsKAT Coder AIR V2.5mediumMistral Small 4mediumvsInkling Smalllowनिःशुल्क उपलब्धMistral Small 4mediumvsMiMo-V2.5-PrononeMistral Small 4mediumvsQwen3.6 35B A3BnoneMistral Small 4mediumvsApodex 1.1 Minidefaultनिःशुल्क उपलब्ध
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 5.6 | 3.8 | |
| कोडिंग | 6.7 | 3.5 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 7.3 | 5.9 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 4.8 | 10.0 | |
| निर्देश पालन | 7.3 | 5.8 | |
| पहेली समाधान | 3.4 | 9.7 | |
| टूल कॉलिंग | 10.0 | 10.0 |