- क्रमांक
- #53
- एकूण आउटपुट टोकन्स
- 301,719
- प्रतिसाद वेळ (सरासरी)
- 27.02s
- एकूण खर्च
- $1.665
Muse Spark 1.1 (medium) vs Pareto 26.9 (default)
average score जवळपास समान आहे: 8.9 vs 8.9. Muse Spark 1.1 (medium) चा benchmark खर्च कमी आहे: $1.665 vs $1.864. Muse Spark 1.1 (medium) वेगवान आहे: 27.02s vs 28.26s, pass rates 73.9% vs 79.7%.
तुलना केलेली मॉडेल्स
- क्रमांक
- #55
- एकूण आउटपुट टोकन्स
- 175,696
- प्रतिसाद वेळ (सरासरी)
- 28.26s
- एकूण खर्च
- $1.864
शिफारस केलेले मॉडेल
Muse Spark 1.1 (medium)
या तुलनेत याचा गुण सर्वाधिक आहे (8.9) आणि 2 मॉडेल्समध्ये खर्च व प्रतिसाद वेळ यांचा एकूण समतोल सर्वोत्तम आहे.
तपशीलवार तुलना
| मेट्रिक | Muse Spark 1.1 Muse Spark 1.1 medium | Pareto 26.9 Pareto 26.9 default |
|---|---|---|
| स्कोअर | 8.9 | 8.9 |
| क्रमांक | #53 | #55 |
| विश्वसनीयता | 10.0 | 10.0 |
| सुसंगतता | 9.3 | 8.1 |
| प्रयत्न | 69/69 | 69/69 |
| बरोबर चाचण्या | ||
| प्रति प्रयत्न पास दर | 73.9% | 79.7% |
| अस्थिर चाचण्या | 2 | 6 |
| एकूण रन | 69 | 69 |
| प्रति निकाल खर्च | 10.403 | 12.422 |
| एकूण खर्च | $1.665 | $1.864 |
| इनपुट किंमत | $1.250 / 1M | $2.500 / 1M |
| आउटपुट किंमत | $4.250 / 1M | $7.500 / 1M |
| कॅश वाचण्याची किंमत | $0.150 / 1M | $0.250 / 1M |
| कॅश लिहिण्याची किंमत | लागू नाही | लागू नाही |
| एकूण इनपुट टोकन्स | 305,707 | 218,199 |
| आउटपुट टोकन्स | 10,240 | 175,696 |
| रिझनिंग टोकन्स | 291,479 | 0 |
| प्रतिसाद वेळ (सरासरी) | 27.02s | 28.26s |
| प्रतिसाद वेळ (कमाल) | 165.38s | 151.76s |
| प्रतिसाद वेळ (एकूण) | 621.38s | 649.90s |
| पॅरामीटर्स | ~1T एकूण (~50B सक्रिय) | - |
| उपलब्धता | बंद स्रोत | बंद स्रोत |
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
मॉडेल जनरेशन शोकेस
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#53 Muse Spark 1.1
medium- खर्च
- $0.024
- वेळ
- 29.2s
- टोकन्स
- 5,774 tok
#55 Pareto 26.9
default- खर्च
- $0.038
- वेळ
- 109.6s
- टोकन्स
- 5,118 tok
श्रेणीवार तपशील
| स्वायत्त एजंट कार्ये | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark 1.1 | 10.0 | 10.0 | 100.0% | 0 | 43.91s | 163,560 | 2,335 | 7,232 | |
| Pareto 26.9 | 10.0 | 10.0 | 100.0% | 0 | 54.17s | 103,835 | 8,348 | 0 |
| अँटी-एआय युक्त्या | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark 1.1 | 10.0 | 10.0 | 100.0% | 0 | 5.72s | 2,334 | 657 | 8,260 | |
| Pareto 26.9 | 7.5 | 8.4 | 66.7% | 1 | 6.44s | 737 | 1,595 | 0 |
| कोडिंग | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark 1.1 | 10.0 | 10.0 | 100.0% | 0 | 15.66s | 8,562 | 347 | 23,562 | |
| Pareto 26.9 | 10.0 | 10.0 | 100.0% | 0 | 49.15s | 7,419 | 1,895 | 0 |
| संयुक्त | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark 1.1 | 8.3 | 10.0 | 50.0% | 0 | 42.62s | 103,921 | 5,220 | 31,068 | |
| Pareto 26.9 | 8.2 | 6.9 | 66.7% | 1 | 81.38s | 88,832 | 146,339 | 0 |
| डेटा पार्सिंग आणि निष्कर्षण | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark 1.1 | 10.0 | 10.0 | 100.0% | 0 | 4.96s | 7,827 | 240 | 3,387 | |
| Pareto 26.9 | 10.0 | 10.0 | 100.0% | 0 | 2.63s | 7,728 | 1,285 | 0 |
| डोमेन-विशिष्ट | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark 1.1 | 3.5 | 4.4 | 33.3% | 2 | 80.83s | 1,596 | 105 | 124,188 | |
| Pareto 26.9 | 5.9 | 7.2 | 55.6% | 1 | 60.97s | 825 | 12,233 | 0 |
| Samanya Buddhimatta | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark 1.1 | 10.0 | 10.0 | 100.0% | 0 | 4.41s | 906 | 116 | 1,833 | |
| Pareto 26.9 | 6.5 | 3.4 | 66.7% | 1 | 6.55s | 492 | 774 | 0 |
| सूचनांचे पालन | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark 1.1 | 6.5 | 10.0 | 50.0% | 0 | 6.31s | 1,527 | 233 | 5,186 | |
| Pareto 26.9 | 9.8 | 10.0 | 100.0% | 0 | 3.82s | 696 | 393 | 0 |
| कोडी सोडवणे | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark 1.1 | 7.9 | 9.9 | 66.7% | 0 | 42.49s | 1,938 | 350 | 76,778 | |
| Pareto 26.9 | 8.2 | 7.3 | 88.9% | 1 | 8.40s | 624 | 1,437 | 0 |
| टूल कॉलिंग | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark 1.1 | 9.8 | 10.0 | 100.0% | 0 | 6.99s | 12,924 | 598 | 1,610 | |
| Pareto 26.9 | 10.0 | 10.0 | 100.0% | 0 | 3.63s | 6,762 | 892 | 0 |
| सामान्य ज्ञान | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark 1.1 | 3.0 | 10.0 | 0.0% | 0 | 18.45s | 612 | 39 | 8,375 | |
| Pareto 26.9 | 2.8 | 1.6 | 33.3% | 1 | 28.57s | 249 | 505 | 0 |
झटपट तुलना
तुलना जोडी बदला
Claude Fable 5mediumvsPareto 26.9defaultMuse Spark 1.2mediumvsPareto 26.9defaultMuse Spark 1.2highvsPareto 26.9defaultQwen3.8 MAXlowvsPareto 26.9defaultMuse Spark 1.1mediumvsQwen3.8 MAXlowMuse Spark 1.1mediumvsGLM 5.3 FlashmaxGemini 3.6 FlashlowvsMuse Spark 1.1mediumGPT-5.4mediumvsPareto 26.9defaultClaude Opus 5lowvsMuse Spark 1.1mediumPareto 26.9defaultvsGLM 5.3 FlashmaxGemini 3.6 FlashlowvsPareto 26.9defaultClaude Opus 5lowvsPareto 26.9default