- क्रमांक
- #53
- एकूण आउटपुट टोकन्स
- 59,058
- प्रतिसाद वेळ (सरासरी)
- 21.62s
- एकूण खर्च
- $0.600
Muse Spark Open (low) vs Pareto 26.9 (default)
Muse Spark Open (low) average score मध्ये पुढे आहे: 8.9 vs 8.9. Muse Spark Open (low) चा benchmark खर्च कमी आहे: $0.600 vs $1.864. Muse Spark Open (low) वेगवान आहे: 21.62s vs 28.26s, pass rates 76.8% vs 79.7%.
तुलना केलेली मॉडेल्स
- क्रमांक
- #58
- एकूण आउटपुट टोकन्स
- 175,696
- प्रतिसाद वेळ (सरासरी)
- 28.26s
- एकूण खर्च
- $1.864
शिफारस केलेले मॉडेल
Muse Spark Open (low)
It has the best score here (8.9), while costing about 3.1x less than Pareto 26.9 (default).
तपशीलवार तुलना
| मेट्रिक | Muse Spark Open Muse Spark Open low | Pareto 26.9 Pareto 26.9 default |
|---|---|---|
| स्कोअर | 8.9 | 8.9 |
| क्रमांक | #53 | #58 |
| विश्वसनीयता | 9.9 | 10.0 |
| सुसंगतता | 9.1 | 8.1 |
| प्रयत्न | 69/69 | 69/69 |
| बरोबर चाचण्या | ||
| प्रति प्रयत्न पास दर | 76.8% | 79.7% |
| अस्थिर चाचण्या | 3 | 6 |
| एकूण रन | 69 | 69 |
| प्रति निकाल खर्च | 3.746 | 12.422 |
| एकूण खर्च | $0.600 | $1.864 |
| इनपुट किंमत | $1.250 / 1M | $2.500 / 1M |
| आउटपुट किंमत | $4.250 / 1M | $7.500 / 1M |
| कॅश वाचण्याची किंमत | $0.150 / 1M | $0.250 / 1M |
| कॅश लिहिण्याची किंमत | लागू नाही | लागू नाही |
| एकूण इनपुट टोकन्स | 278,684 | 218,199 |
| आउटपुट टोकन्स | 10,151 | 175,696 |
| रिझनिंग टोकन्स | 48,907 | 0 |
| प्रतिसाद वेळ (सरासरी) | 21.62s | 28.26s |
| प्रतिसाद वेळ (कमाल) | 119.16s | 151.76s |
| प्रतिसाद वेळ (एकूण) | 497.25s | 649.90s |
| पॅरामीटर्स | 816B एकूण (42B सक्रिय) | - |
| उपलब्धता | वेट्स उपलब्ध | बंद स्रोत |
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
मॉडेल जनरेशन शोकेस
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#53 Muse Spark Open
low- खर्च
- $0.014
- वेळ
- 38.9s
- टोकन्स
- 3,372 tok
#58 Pareto 26.9
default- खर्च
- $0.038
- वेळ
- 109.6s
- टोकन्स
- 5,118 tok
श्रेणीवार तपशील
| स्वायत्त एजंट कार्ये | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark Open | 10.0 | 10.0 | 100.0% | 0 | 55.04s | 135,775 | 2,192 | 1,792 | |
| Pareto 26.9 | 10.0 | 10.0 | 100.0% | 0 | 54.17s | 103,835 | 8,348 | 0 |
| अँटी-एआय युक्त्या | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark Open | 9.2 | 8.4 | 91.7% | 1 | 10.50s | 2,218 | 600 | 4,374 | |
| Pareto 26.9 | 7.5 | 8.4 | 66.7% | 1 | 6.44s | 737 | 1,595 | 0 |
| कोडिंग | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark Open | 10.0 | 10.0 | 100.0% | 0 | 9.97s | 8,479 | 347 | 10,835 | |
| Pareto 26.9 | 10.0 | 10.0 | 100.0% | 0 | 49.15s | 7,419 | 1,895 | 0 |
| संयुक्त | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark Open | 8.4 | 10.0 | 50.0% | 0 | 32.84s | 105,334 | 5,543 | 3,978 | |
| Pareto 26.9 | 8.2 | 6.9 | 66.7% | 1 | 81.38s | 88,832 | 146,339 | 0 |
| डेटा पार्सिंग आणि निष्कर्षण | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark Open | 10.0 | 10.0 | 100.0% | 0 | 4.53s | 7,989 | 220 | 1,070 | |
| Pareto 26.9 | 10.0 | 10.0 | 100.0% | 0 | 2.63s | 7,728 | 1,285 | 0 |
| डोमेन-विशिष्ट | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark Open | 5.3 | 10.0 | 33.3% | 0 | 75.55s | 1,759 | 75 | 16,620 | |
| Pareto 26.9 | 5.9 | 7.2 | 55.6% | 1 | 60.97s | 825 | 12,233 | 0 |
| Samanya Buddhimatta | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark Open | 6.1 | 3.1 | 66.7% | 1 | 5.85s | 877 | 137 | 1,576 | |
| Pareto 26.9 | 6.5 | 3.4 | 66.7% | 1 | 6.55s | 492 | 774 | 0 |
| सूचनांचे पालन | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark Open | 8.0 | 6.8 | 66.7% | 1 | 10.26s | 1,467 | 99 | 2,323 | |
| Pareto 26.9 | 9.8 | 10.0 | 100.0% | 0 | 3.82s | 696 | 393 | 0 |
| कोडी सोडवणे | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark Open | 10.0 | 10.0 | 100.0% | 0 | 7.99s | 1,849 | 417 | 3,579 | |
| Pareto 26.9 | 8.2 | 7.3 | 88.9% | 1 | 8.40s | 624 | 1,437 | 0 |
| टूल कॉलिंग | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark Open | 10.0 | 10.0 | 100.0% | 0 | 4.37s | 12,354 | 417 | 626 | |
| Pareto 26.9 | 10.0 | 10.0 | 100.0% | 0 | 3.63s | 6,762 | 892 | 0 |
| सामान्य ज्ञान | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Muse Spark Open | 3.0 | 10.0 | 0.0% | 0 | 14.23s | 583 | 104 | 2,134 | |
| Pareto 26.9 | 2.8 | 1.6 | 33.3% | 1 | 28.57s | 249 | 505 | 0 |
झटपट तुलना
तुलना जोडी बदला
Claude Fable 5mediumvsPareto 26.9defaultMuse Spark 1.1mediumvsPareto 26.9defaultMuse Spark OpenlowvsGLM 5.3 FlashmaxMuse Spark 1.2mediumvsPareto 26.9defaultGemini 4 ArgonmediumvsMuse Spark OpenlowMuse Spark 1.2highvsPareto 26.9defaultQwen3.8 MAXlowvsPareto 26.9defaultGemini 3.5 Flash LitehighvsMuse Spark OpenlowClaude Fable 5mediumvsMuse Spark OpenlowGPT-5.4mediumvsPareto 26.9defaultMuse Spark OpenlowvsQwen3.8 Max (0902)mediumPareto 26.9defaultvsGLM 5.3 Flashmax