AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#138

Mistral Small 4

Mistral रिलीज़: 2026-03-16 परीक्षण किया गया: 2026-06-04 13:43 mistralai/mistral-small-2603::medium
(medium) (none)

सारांश

Mistral Small 4 AI BENCHY पर 5.1 स्कोर करता है और #138 पर है। इसकी reliability 10.0, pass rate 44.4%, कुल लागत $0.068, और औसत response time 9.40s है।

Mistral Small 4 को अलग क्या बनाता है: यह एंटी-एआई ट्रिक्स में सबसे अलग दिखता है, जहाँ इसकी रैंक #3 है; जबकि पहेली समाधान इसकी सबसे कमजोर जगह है, जहाँ यह #12 पर है।

संगति

6.9

कुल आउटपुट टोकन

108,862

कुल इनपुट टोकन

42,576

इनपुट कीमत

$0.150 / 1M

आउटपुट कीमत

$0.600 / 1M

सही परीक्षण

गलत टेस्ट: 16

प्रति प्रयास पास दर: 44.4%

अस्थिर टेस्ट

8

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

9.40s

प्रतिक्रिया समय (अधिकतम): 59.15s

प्रतिक्रिया समय (कुल): 197.39s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#138 Mistral Small 4

medium
Cost
$0.006
Time
47.9s
Tokens
9,857 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-06-04 13:43 नया टेस्ट जोड़ा गया 5.3 10.0 $0.068 वर्तमान रन
2026-05-22 00:16 सूट बदला गया 5.4 10.0 $0.056 तुलना करें
2026-04-11 01:44 पहला दर्ज रन 5.7 लागू नहीं $0.034 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-06-04 13:43 · वर्तमान रन5.16.910.05/218108,86242,576$0.0689.40s
2026-05-22 00:16 · सूट बदला गया5.47.110.05/20789,6830$0.0568.33s
अंतर-0.3-0.20.00+1+19179+42576+$0.012+1070ms

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

कीमत का इतिहास

OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।

तारीख इनपुट कीमत आउटपुट कीमत
2026-06-04 15:40 $0.150 / 1M $0.600 / 1M

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 5.6 3.8
कोडिंग 4.4 5.1
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 7.3 5.9
डोमेन-विशिष्ट 5.3 7.2
Samanya Buddhimatta 4.8 10.0
निर्देश पालन 7.3 5.8
पहेली समाधान 3.4 9.7
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल