नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Nemotron 3 Ultra 550b A55b vs Mimo V2 Omni

सारांश

Nemotron 3 Ultra 550b A55b vs Mimo V2 Omni benchmark तुलना: Nemotron 3 Ultra 550b A55b average score मध्ये पुढे आहे: 8.1 vs 6.8. Nemotron 3 Ultra 550b A55b चा benchmark खर्च कमी आहे: $0.158 vs $0.683. Nemotron 3 Ultra 550b A55b वेगवान आहे: 15.05s vs 41.16s, pass rates 69.8% vs 55.6%.

शिफारस केलेले मॉडेल: Nemotron 3 Ultra 550b A55b - It has the best score here (8.1), while costing about 4.3x less than Mimo V2 Omni.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-06-18

मेट्रिक Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium प्रकाशन: 2026-06-04 मोफत उपलब्ध Mimo V2 Omni Mimo V2 Omni medium प्रकाशन: 2026-03-18
स्कोअर 8.1 6.8
क्रमांक #26 #73
विश्वसनीयता 9.7 10.0
सुसंगतता 8.8 8.7
बरोबर चाचण्या
प्रति प्रयत्न पास दर 69.8% 55.6%
अस्थिर चाचण्या 3 3
एकूण रन 63 55
प्रति निकाल खर्च 0.000 7.334
एकूण खर्च $0.158 $0.683
इनपुट किंमत $0.500 / 1M $1.722 / 1M
आउटपुट किंमत $2.200 / 1M $1.722 / 1M
एकूण इनपुट टोकन्स 46,813 37,007
आउटपुट टोकन्स 18,002 1,952
रिझनिंग टोकन्स 53,091 357,306
प्रतिसाद वेळ (सरासरी) 15.05s 41.16s
प्रतिसाद वेळ (कमाल) 43.93s 299.23s
प्रतिसाद वेळ (एकूण) 316.09s 823.26s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#26 Nemotron 3 Ultra 550b A55b

medium
अवैध SVG
खर्च
$0.000
वेळ
300.0s
टोकन्स
0 tok

#73 Mimo V2 Omni

medium
This model has been deprecated. It is recommended to migrate to xiaomi/mimo-v2.5
खर्च
$0.000
वेळ
0.1s
टोकन्स
0 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

अँटी-एआय युक्त्या स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
Mimo V2 Omni 10.0 10.0 100.0% 0 2.75s 621 269 1,701
कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
Mimo V2 Omni 3.3 6.5 11.1% 1 183.89s 4,787 292 174,314
संयुक्त स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
Mimo V2 Omni 10.0 10.0 100.0% 0 25.87s 15,060 380 8,673
डेटा पार्सिंग आणि निष्कर्षण स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
Mimo V2 Omni 10.0 10.0 100.0% 0 3.04s 6,002 155 591
डोमेन-विशिष्ट स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
Mimo V2 Omni 3.0 10.0 0.0% 0 47.89s 735 155 68,398
Samanya Buddhimatta स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
Mimo V2 Omni 5.4 2.5 66.7% 1 3.61s 492 136 492
सूचनांचे पालन स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
Mimo V2 Omni 8.3 10.0 50.0% 0 4.99s 470 49 515
कोडी सोडवणे स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
Mimo V2 Omni 5.9 7.2 55.6% 1 2.38s 410 210 860
टूल कॉलिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
Mimo V2 Omni 10.0 10.0 100.0% 0 13.98s 8,220 303 3,461
सामान्य ज्ञान स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240
Mimo V2 Omni 3.0 10.0 0.0% 0 234.19s 210 3 98,301

झटपट तुलना

तुलना जोडी बदला