#121 Mistral Small 4
medium- Cost
- $0.006
- Time
- 47.9s
- Tokens
- 9,857 tok
Mistral
रिलीज़: 2026-03-16
परीक्षण किया गया: 2026-05-22 00:16
mistralai/mistral-small-2603::medium
(medium)
(none)
सारांश
Mistral Small 4 AI BENCHY पर 5.4 स्कोर करता है और #121 पर है। इसकी reliability 10.0, pass rate 45.0%, कुल लागत $0.056, और औसत response time 8.33s है।
Mistral Small 4 को अलग क्या बनाता है: यह एंटी-एआई ट्रिक्स में सबसे अलग दिखता है, जहाँ इसकी रैंक #2 है; जबकि डेटा पार्सिंग और निष्कर्षण इसकी सबसे कमजोर जगह है, जहाँ यह #9 पर है। यह असामान्य रूप से अधिक reasoning tokens इस्तेमाल करता है, जिससे धीमे या महंगे runs समझ में आ सकते हैं।
5.4
संगति
7.1
10.0
$0.056
कुल आउटपुट टोकन
89,683
कुल इनपुट टोकन
0
इनपुट कीमत
$0.150 / 1M
आउटपुट कीमत
$0.600 / 1M
अस्थिर टेस्ट
7
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Generation showcase
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-06-04 13:43 नया टेस्ट जोड़ा गया | 5.3 | 10.0 | $0.068 | तुलना करें | |
| 2026-05-22 00:16 सूट बदला गया | 5.4 | 10.0 | $0.056 | वर्तमान रन | |
| 2026-04-11 01:44 पहला दर्ज रन | 5.7 | लागू नहीं | $0.034 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:16 · सूट बदला गया | 5.4 | 7.1 | 10.0 | 5/20 | 7 | 89,683 | 0 | $0.056 | 8.33s |
| 2026-06-04 13:43 · नया टेस्ट जोड़ा गया | 5.3 | 6.9 | 10.0 | 5/21 | 8 | 108,862 | 42,576 | $0.068 | 9.40s |
| अंतर | +0.1 | +0.2 | 0.0 | 0 | -1 | -19179 | -42576 | -$0.012 | -1070ms |
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Mistral Small 4mediumvsQwen3.5 Plus 2026-02-15noneMistral Small 4mediumvsKimi K2.6noneनिःशुल्क उपलब्धMistral Small 4mediumvsGLM 5V TurbononeMistral Small 4mediumvsGPT-5.4noneMistral Small 4mediumvsGemini 3.5 FlashhighMistral Small 4mediumvsGemini 3 Flash PreviewmediumMistral Small 4mediumvsNemotron 3 Ultra 550b A55bmediumनिःशुल्क उपलब्धMistral Small 4mediumvsGPT-5.5low
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 5.6 | 3.8 | |
| कोडिंग | 5.1 | 6.8 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 7.3 | 5.9 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 4.8 | 10.0 | |
| निर्देश पालन | 7.3 | 5.8 | |
| पहेली समाधान | 3.4 | 9.7 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |