- क्रमांक
- #391
- एकूण आउटपुट टोकन्स
- 25,521
- प्रतिसाद वेळ (सरासरी)
- 92.50s
- एकूण खर्च
- $0.073
Command A+ (low) vs Decider V1.1 27B (default)
Command A+ (low) average score मध्ये पुढे आहे: 3.0 vs 2.6. Decider V1.1 27B (default) चा benchmark खर्च कमी आहे: $0.002 vs $0.073. Decider V1.1 27B (default) वेगवान आहे: 320ms vs 92.50s, pass rates 1.5% vs 17.4%.
तुलना केलेली मॉडेल्स
- क्रमांक
- #395
- एकूण आउटपुट टोकन्स
- 69
- प्रतिसाद वेळ (सरासरी)
- 320ms
- एकूण खर्च
- $0.002
शिफारस केलेले मॉडेल
Decider V1.1 27B (default)
Its score stays close to the best score here (2.6 vs 3.0), while costing about 49.4x less than Command A+ (low).
तपशीलवार तुलना
| मेट्रिक | Command A+ Command A+ low | Decider V1.1 27B Decider V1.1 27B default |
|---|---|---|
| स्कोअर | 3.0 | 2.6 |
| क्रमांक | #391 | #395 |
| विश्वसनीयता | 3.5 | 10.0 |
| सुसंगतता | 9.6 | 5.2 |
| प्रयत्न | 69/69 | 36/69 |
| बरोबर चाचण्या | ||
| प्रति प्रयत्न पास दर | 1.5% | 17.4% |
| अस्थिर चाचण्या | 1 | 0 |
| एकूण रन | 69 | 36 |
| प्रति निकाल खर्च | 0.000 | 0.037 |
| एकूण खर्च | $0.073 | $0.002 |
| इनपुट किंमत | $0.300 / 1M | $0.020 / 1M |
| आउटपुट किंमत | $1.500 / 1M | $0.000 / 1M |
| कॅश वाचण्याची किंमत | $0.150 / 1M | लागू नाही |
| कॅश लिहिण्याची किंमत | लागू नाही | लागू नाही |
| एकूण इनपुट टोकन्स | 114,874 | 73,557 |
| आउटपुट टोकन्स | 1,992 | 69 |
| रिझनिंग टोकन्स | 23,529 | 0 |
| प्रतिसाद वेळ (सरासरी) | 92.50s | 320ms |
| प्रतिसाद वेळ (कमाल) | 128.54s | 491ms |
| प्रतिसाद वेळ (एकूण) | 2127.40s | 3.84s |
| पॅरामीटर्स | 218B एकूण (25B सक्रिय) | 27B |
| उपलब्धता | मुक्त स्रोत | मुक्त स्रोत |
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
मॉडेल जनरेशन शोकेस
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#391 Command A+
low
Provider returned error
- खर्च
- $0.000
- वेळ
- 0.2s
- टोकन्स
- 0 tok
#395 Decider V1.1 27B
default
या मॉडेलसाठी अद्याप कोणताही शोकेस निकाल तयार झालेला नाही.
- खर्च
- लागू नाही
- वेळ
- -
- टोकन्स
- 0 tok
श्रेणीवार तपशील
| स्वायत्त एजंट कार्ये | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 2.8 | 1.6 | 33.3% | 1 | 128.54s | 114,874 | 1,992 | 23,529 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| अँटी-एआय युक्त्या | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 87.46s | 0 | 0 | 0 | |
| Decider V1.1 27B | 4.0 | 7.5 | 25.0% | 0 | 321ms | 7,161 | 9 | 0 |
| कोडिंग | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 86.43s | 0 | 0 | 0 | |
| Decider V1.1 27B | 4.9 | 6.7 | 33.3% | 0 | 305ms | 32,733 | 12 | 0 |
| संयुक्त | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 83.53s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| डेटा पार्सिंग आणि निष्कर्षण | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 85.39s | 0 | 0 | 0 | |
| Decider V1.1 27B | 6.5 | 10.0 | 50.0% | 0 | 286ms | 24,396 | 15 | 0 |
| डोमेन-विशिष्ट | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 82.74s | 0 | 0 | 0 | |
| Decider V1.1 27B | 5.3 | 10.0 | 33.3% | 0 | 313ms | 2,874 | 9 | 0 |
| Samanya Buddhimatta | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 101.81s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| सूचनांचे पालन | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 105.69s | 0 | 0 | 0 | |
| Decider V1.1 27B | 1.5 | 5.0 | 0.0% | 0 | 333ms | 5,862 | 21 | 0 |
| कोडी सोडवणे | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 95.76s | 0 | 0 | 0 | |
| Decider V1.1 27B | 1.7 | 3.3 | 0.0% | 0 | 422ms | 531 | 3 | 0 |
| टूल कॉलिंग | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 99.68s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| सामान्य ज्ञान | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 103.52s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
झटपट तुलना
तुलना जोडी बदला
Command A+lowvsJev 1.13defaultCommand A+lowvsGrok 4.20noneCommand A+nonevsDecider V1.1 27BdefaultCommand A+lowvsGPT-6 Luna DecisionsdefaultCommand A+lowvsKev 4BdefaultCommand A+highvsDecider V1.1 27BdefaultCommand A+lowvsLing 3.0 TinymediumCommand A+lowvsLing 3.0 TinyhighGemini 3 Flash PreviewhighvsDecider V1.1 27BdefaultCommand A+mediumvsDecider V1.1 27BdefaultDecider V1.1 27BdefaultvsGrok 4.20noneCommand A+lowvsNemotron 3.5 Lightningnoneमोफत उपलब्ध