- क्रमांक
- #329
- एकूण आउटपुट टोकन्स
- 11,832
- प्रतिसाद वेळ (सरासरी)
- 22.65s
- एकूण खर्च
- $0.786
Ember-1 vs Nemotron 3.5 Lightning (high)
Ember-1 average score मध्ये पुढे आहे: 5.4 vs 5.2. Nemotron 3.5 Lightning (high) चा benchmark खर्च कमी आहे: $0.168 vs $0.786. Ember-1 वेगवान आहे: 22.65s vs 77.08s, pass rates 43.5% vs 47.8%.
तुलना केलेली मॉडेल्स
- क्रमांक
- #339
- एकूण आउटपुट टोकन्स
- 626,081
- प्रतिसाद वेळ (सरासरी)
- 77.08s
- एकूण खर्च
- $0.168
शिफारस केलेले मॉडेल
Nemotron 3.5 Lightning (high)
Its score stays close to the best score here (5.2 vs 5.4), while costing about 4.7x less than Ember-1.
तपशीलवार तुलना
| मेट्रिक | Ember-1 Ember-1 none | Nemotron 3.5 Lightning Nemotron 3.5 Lightning high मोफत उपलब्ध |
|---|---|---|
| स्कोअर | 5.4 | 5.2 |
| क्रमांक | #329 | #339 |
| विश्वसनीयता | 8.8 | 9.6 |
| सुसंगतता | 8.6 | 5.7 |
| प्रयत्न | 69/69 | 69/69 |
| बरोबर चाचण्या | ||
| प्रति प्रयत्न पास दर | 43.5% | 47.8% |
| अस्थिर चाचण्या | 4 | 12 |
| एकूण रन | 69 | 69 |
| प्रति निकाल खर्च | 9.817 | 0.000 |
| एकूण खर्च | $0.786 | $0.168 |
| इनपुट किंमत | $3.000 / 1M | $0.060 / 1M |
| आउटपुट किंमत | $15.000 / 1M | $0.160 / 1M |
| कॅश वाचण्याची किंमत | $0.300 / 1M | $0.030 / 1M |
| कॅश लिहिण्याची किंमत | लागू नाही | लागू नाही |
| एकूण इनपुट टोकन्स | 202,617 | 170,517 |
| आउटपुट टोकन्स | 11,832 | 149,968 |
| रिझनिंग टोकन्स | 0 | 509,725 |
| प्रतिसाद वेळ (सरासरी) | 22.65s | 77.08s |
| प्रतिसाद वेळ (कमाल) | 93.12s | 490.99s |
| प्रतिसाद वेळ (एकूण) | 520.91s | 1772.78s |
| पॅरामीटर्स | ~2.8T एकूण (~104B सक्रिय) | 30B एकूण (3B सक्रिय) |
| उपलब्धता | बंद स्रोत | वेट्स उपलब्ध |
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
मॉडेल जनरेशन शोकेस
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#329 Ember-1
none- खर्च
- $0.156
- वेळ
- 224.6s
- टोकन्स
- 10,555 tok
#339 Nemotron 3.5 Lightning
high- खर्च
- $0.000
- वेळ
- 92.8s
- टोकन्स
- 11,343 tok
श्रेणीवार तपशील
| स्वायत्त एजंट कार्ये | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 6.1 | 3.1 | 66.7% | 1 | 92.87s | 175,191 | 9,168 | 0 | |
| Nemotron 3.5 Lightning | 3.5 | 8.3 | 0.0% | 0 | 490.99s | 52,501 | 1,624 | 3,472 |
| अँटी-एआय युक्त्या | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.2 | 7.9 | 41.7% | 1 | 22.37s | 796 | 867 | 0 | |
| Nemotron 3.5 Lightning | 5.5 | 3.7 | 66.7% | 3 | 10.29s | 696 | 2,432 | 15,948 |
| कोडिंग | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.5 | 10.0 | 33.3% | 0 | 1.94s | 7,485 | 393 | 0 | |
| Nemotron 3.5 Lightning | 4.4 | 5.1 | 33.3% | 2 | 168.41s | 7,623 | 68,533 | 242,319 |
| संयुक्त | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 49.01s | 12,162 | 327 | 0 | |
| Nemotron 3.5 Lightning | 6.4 | 10.0 | 50.0% | 0 | 160.45s | 90,257 | 17,550 | 119,725 |
| डेटा पार्सिंग आणि निष्कर्षण | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 6.4 | 5.9 | 66.7% | 1 | 35.25s | 4,017 | 161 | 0 | |
| Nemotron 3.5 Lightning | 7.3 | 5.9 | 83.3% | 1 | 13.99s | 7,944 | 3,210 | 16,835 |
| डोमेन-विशिष्ट | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.3 | 10.0 | 33.3% | 0 | 21.61s | 804 | 68 | 0 | |
| Nemotron 3.5 Lightning | 2.9 | 4.4 | 22.2% | 2 | 88.61s | 798 | 45,616 | 72,496 |
| Samanya Buddhimatta | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.0 | 10.0 | 0.0% | 0 | 2.28s | 540 | 160 | 0 | |
| Nemotron 3.5 Lightning | 3.7 | 9.5 | 0.0% | 0 | 7.58s | 516 | 4,331 | 4,408 |
| सूचनांचे पालन | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 6.4 | 5.8 | 66.7% | 1 | 31.00s | 509 | 81 | 0 | |
| Nemotron 3.5 Lightning | 8.5 | 6.8 | 83.3% | 1 | 4.98s | 723 | 502 | 3,779 |
| कोडी सोडवणे | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 10.0 | 10.0 | 100.0% | 0 | 2.54s | 840 | 569 | 0 | |
| Nemotron 3.5 Lightning | 3.6 | 1.8 | 44.4% | 3 | 6.09s | 726 | 1,236 | 9,851 |
| टूल कॉलिंग | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 26.44s | 0 | 0 | 0 | |
| Nemotron 3.5 Lightning | 10.0 | 10.0 | 100.0% | 0 | 6.92s | 8,526 | 3,745 | 3,781 |
| सामान्य ज्ञान | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 1.05s | 273 | 38 | 0 | |
| Nemotron 3.5 Lightning | 3.0 | 10.0 | 0.0% | 0 | 77.98s | 207 | 1,189 | 17,111 |
झटपट तुलना
तुलना जोडी बदला
Ember-1nonevsStep 3.5 FlashmediumLing 3.0 FlashnonevsNemotron 3.5 Lightninghighमोफत उपलब्धNemotron 3.5 Lightninghighमोफत उपलब्धvsInkling Smalllowमोफत उपलब्धEmber-1nonevsHy4 previewlowNorth Mini Codemediumमोफत उपलब्धvsEmber-1noneEmber-1nonevsGranite 4.2 8BlowMistral Small 4mediumvsNemotron 3.5 Lightninghighमोफत उपलब्धMistral Small 4nonevsNemotron 3.5 Lightninghighमोफत उपलब्धNemotron 3.5 Lightninghighमोफत उपलब्धvsQwen3.6 35B A3BnoneMercury 2.5lowvsNemotron 3.5 Lightninghighमोफत उपलब्धNemotron 3.5 Lightninghighमोफत उपलब्धvsLaguna XS 2.1noneमोफत उपलब्धKAT Coder AIR V2.5mediumvsNemotron 3.5 Lightninghighमोफत उपलब्ध