AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#17

Muse Spark 1.1

Meta प्रकाशन: 2026-07-16 चाचणी तारीख: 2026-07-16 18:41 meta/muse-spark-1.1::low
~1T एकूण (~50B सक्रिय)MoEबंद स्रोतअंदाजित

सारांश

Muse Spark 1.1 AI BENCHY वर 8.8 स्कोर करते आणि #17 वर आहे. याची reliability 10.0, pass rate 73.0%, एकूण खर्च $0.469, आणि सरासरी response time 10.11s आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~1T एकूण (~50B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

8.5

एकूण आउटपुट टोकन्स

92,669

एकूण इनपुट टोकन्स

59,923

इनपुट किंमत

$1.250 / 1M

आउटपुट किंमत

$4.250 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 8

प्रति प्रयत्न पास दर: 73.0%

अस्थिर चाचण्या

4

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

10.11s

प्रतिसाद वेळ (कमाल): 54.15s

प्रतिसाद वेळ (एकूण): 212.29s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#17 Muse Spark 1.1

low
खर्च
$0.020
वेळ
39.2s
टोकन्स
4,947 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 03:25 पुन्हा चाचणी 8.3 10.0 $0.673 तुलना करा
2026-07-16 23:35 नवीन चाचणी जोडली 8.3 10.0 $0.647 तुलना करा
2026-07-16 18:41 पहिला रन 8.8 10.0 $0.469 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-07-16 18:41 · पहिला रन63/63 प्रयत्न8.88.510.013/21492,66959,923$0.46910.11s
2026-07-16 23:35 · नवीन चाचणी जोडली66/66 प्रयत्न8.38.510.013/224110,314142,298$0.64711.45s
फरक+0.50.00.000-17645-82375-$0.178-1342ms

बेंचमार्क कव्हरेज वेगळे आहे: 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-07-16 19:03 $1.250 / 1M $4.250 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 7.9 6.3
कोडिंग 10.0 10.0
संयुक्त 9.6 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 2.9 7.2
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 7.3 6.0
कोडी सोडवणे 8.3 10.0
टूल कॉलिंग 9.8 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स