नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Meta: Muse Spark 1.1 vs Nemotron 3 Ultra 550b A55b

सारांश

Muse Spark 1.1 (medium) average score मध्ये पुढे आहे: 8.9 vs 8.1. Nemotron 3 Ultra 550b A55b (medium) चा benchmark खर्च कमी आहे: $0.249 vs $1.152. Nemotron 3 Ultra 550b A55b (medium) वेगवान आहे: 15.05s vs 23.35s, pass rates 76.2% vs 69.8%.

शिफारस केलेले मॉडेलNemotron 3 Ultra 550b A55b (medium)Its score stays close to the best score here (8.1 vs 8.9), while costing about 4.6x less than Muse Spark 1.1 (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-16

मेट्रिक Muse Spark 1.1 Muse Spark 1.1 medium प्रकाशन: 2026-07-16 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium प्रकाशन: 2026-06-04 मोफत उपलब्ध
स्कोअर 8.9 8.1
क्रमांक #15 #34
विश्वसनीयता 10.0 9.7
सुसंगतता 9.2 8.8
बरोबर चाचण्या
प्रति प्रयत्न पास दर 76.2% 69.8%
अस्थिर चाचण्या 2 3
एकूण रन 63 63
प्रति निकाल खर्च 7.676 0.000
एकूण खर्च $1.152 $0.249
इनपुट किंमत $1.250 / 1M $0.600 / 1M
आउटपुट किंमत $4.250 / 1M $3.600 / 1M
एकूण इनपुट टोकन्स 59,928 46,813
आउटपुट टोकन्स 3,523 18,002
रिझनिंग टोकन्स 249,752 53,091
प्रतिसाद वेळ (सरासरी) 23.35s 15.05s
प्रतिसाद वेळ (कमाल) 165.38s 43.93s
प्रतिसाद वेळ (एकूण) 490.40s 316.09s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#15 Muse Spark 1.1

medium
खर्च
$0.024
वेळ
29.2s
टोकन्स
5,774 tok

#34 Nemotron 3 Ultra 550b A55b

medium
अवैध SVG
खर्च
$0.000
वेळ
300.0s
टोकन्स
0 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Muse Spark 1.1 10.0 10.0 100.0% 0 15.66s 8,562 347 23,562
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725

झटपट तुलना

तुलना जोडी बदला