AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#46

Muse Spark 1.1

Meta रिलीज़: 2026-07-16 परीक्षण किया गया: 2026-08-14 03:25 meta/muse-spark-1.1::low
~1T कुल (~50B सक्रिय)MoEबंद स्रोतअनुमानित

सारांश

Muse Spark 1.1 AI BENCHY पर 8.3 स्कोर करता है और #46 पर है। इसकी reliability 10.0, pass rate 71.2%, कुल लागत $0.673, और औसत response time 11.89s है।

Muse Spark 1.1 को अलग क्या बनाता है: यह Samanya Buddhimatta में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि निर्देश पालन इसकी सबसे कमजोर जगह है, जहाँ यह #16 पर है। यह समान मॉडलों की तुलना में काफ़ी तेज है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

अनुमानित
पैरामीटर
~1T कुल (~50B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
लाइसेंस
-

सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।

संगति

8.5

कुल आउटपुट टोकन

116,489

कुल इनपुट टोकन

141,878

इनपुट कीमत

$1.250 / 1M

आउटपुट कीमत

$4.250 / 1M

सही परीक्षण

गलत टेस्ट: 9

प्रति प्रयास पास दर: 71.2%

अस्थिर टेस्ट

4

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

11.89s

प्रतिक्रिया समय (अधिकतम): 54.15s

प्रतिक्रिया समय (कुल): 261.69s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#46 Muse Spark 1.1

low
लागत
$0.020
समय
39.2s
टोकन
4,947 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-08-14 03:25 दोबारा परीक्षण 8.3 10.0 $0.673 वर्तमान रन
2026-07-16 23:35 नया टेस्ट जोड़ा गया 8.3 10.0 $0.647 तुलना करें
2026-07-16 18:41 पहला रन 8.8 10.0 $0.469 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

कीमत का इतिहास

OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।

तारीख इनपुट कीमत आउटपुट कीमत
2026-08-14 12:51 $1.250 / 1M $4.250 / 1M

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 7.9 6.3
कोडिंग 10.0 10.0
संयुक्त 6.6 9.1
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.6 7.2
Samanya Buddhimatta 10.0 10.0
निर्देश पालन 7.3 6.0
पहेली समाधान 8.3 10.0
टूल कॉलिंग 9.8 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल