#90 Mistral Small 4
none- लागत
- $0.002
- समय
- 10.4s
- टोकन
- 2,370 tok
Mistral
रिलीज़: 2026-03-16
परीक्षण किया गया: 2026-04-11 01:44
mistralai/mistral-small-2603::none
(medium)
(none)
सारांश
Mistral Small 4 AI BENCHY पर 5.2 स्कोर करता है और #90 पर है। इसकी reliability लागू नहीं, pass rate 31.5%, कुल लागत $0.006, और औसत response time 665ms है।
Mistral Small 4 को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #2 है; जबकि पहेली समाधान इसकी सबसे कमजोर जगह है, जहाँ यह #18 पर है। इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
5.2
संगति
9.5
लागू नहीं
$0.006
कुल आउटपुट टोकन
2,207
कुल इनपुट टोकन
0
इनपुट कीमत
$0.150 / 1M
आउटपुट कीमत
$0.600 / 1M
अस्थिर टेस्ट
1
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-07-16 22:21 नया टेस्ट जोड़ा गया | 5.1 | 10.0 | $0.022 | तुलना करें | |
| 2026-06-04 13:41 नया टेस्ट जोड़ा गया | 4.9 | 10.0 | $0.007 | तुलना करें | |
| 2026-05-22 00:14 सूट बदला गया | 5.0 | 10.0 | $0.007 | तुलना करें | |
| 2026-04-11 01:44 पहला दर्ज रन | 5.2 | लागू नहीं | $0.006 | वर्तमान रन |
रन तुलना
| रन | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहला दर्ज रन | 5.2 | 9.5 | लागू नहीं | 5/18 | 1 | 2,207 | 0 | $0.006 | 665ms |
| 2026-05-22 00:14 · सूट बदला गया | 5.0 | 9.5 | 10.0 | 5/20 | 1 | 2,251 | 0 | $0.007 | 658ms |
| अंतर | +0.2 | 0.0 | 0 | 0 | -44 | 0 | -$0.001 | +7ms |
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Mistral Small 4nonevsInklingnoneMistral Small 4nonevsQwen3 Coder NextnoneMistral Small 4nonevsLing-2.6-1TnoneMistral Small 4nonevsMistral Small 4mediumMistral Small 4nonevsQwen3.6 35B A3BnoneMistral Small 4nonevsMiMo-V2.5noneMistral Small 4nonevsLaguna XS 2.1noneनिःशुल्क उपलब्धMistral Small 4nonevsQwen3.5-9BnoneMistral Small 4nonevsLaguna S 2.1highनिःशुल्क उपलब्धMistral Small 4nonevsNorth Mini Codenoneनिःशुल्क उपलब्ध
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 3.4 | 7.9 | |
| कोडिंग | 4.5 | 9.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| निर्देश पालन | 6.5 | 10.0 | |
| पहेली समाधान | 3.1 | 9.9 | |
| टूल कॉलिंग | 10.0 | 10.0 |