- क्रमांक
- #387
- एकूण आउटपुट टोकन्स
- 28,663
- प्रतिसाद वेळ (सरासरी)
- 89.96s
- एकूण खर्च
- $0.079
Command A+ (high) vs Decider V1.1 27B (default)
Command A+ (high) average score मध्ये पुढे आहे: 3.2 vs 2.6. Decider V1.1 27B (default) चा benchmark खर्च कमी आहे: $0.002 vs $0.079. Decider V1.1 27B (default) वेगवान आहे: 320ms vs 89.96s, pass rates 0.0% vs 17.4%.
तुलना केलेली मॉडेल्स
- क्रमांक
- #395
- एकूण आउटपुट टोकन्स
- 69
- प्रतिसाद वेळ (सरासरी)
- 320ms
- एकूण खर्च
- $0.002
शिफारस केलेले मॉडेल
Decider V1.1 27B (default)
Its score stays close to the best score here (2.6 vs 3.2), while costing about 53.3x less than Command A+ (high).
तपशीलवार तुलना
| मेट्रिक | Command A+ Command A+ high | Decider V1.1 27B Decider V1.1 27B default |
|---|---|---|
| स्कोअर | 3.2 | 2.6 |
| क्रमांक | #387 | #395 |
| विश्वसनीयता | 3.5 | 10.0 |
| सुसंगतता | 10.0 | 5.2 |
| प्रयत्न | 69/69 | 36/69 |
| बरोबर चाचण्या | ||
| प्रति प्रयत्न पास दर | 0.0% | 17.4% |
| अस्थिर चाचण्या | 0 | 0 |
| एकूण रन | 69 | 36 |
| प्रति निकाल खर्च | 0.000 | 0.037 |
| एकूण खर्च | $0.079 | $0.002 |
| इनपुट किंमत | $0.300 / 1M | $0.020 / 1M |
| आउटपुट किंमत | $1.500 / 1M | $0.000 / 1M |
| कॅश वाचण्याची किंमत | $0.150 / 1M | लागू नाही |
| कॅश लिहिण्याची किंमत | लागू नाही | लागू नाही |
| एकूण इनपुट टोकन्स | 117,966 | 73,557 |
| आउटपुट टोकन्स | 5,149 | 69 |
| रिझनिंग टोकन्स | 23,514 | 0 |
| प्रतिसाद वेळ (सरासरी) | 89.96s | 320ms |
| प्रतिसाद वेळ (कमाल) | 156.00s | 491ms |
| प्रतिसाद वेळ (एकूण) | 2069.01s | 3.84s |
| पॅरामीटर्स | 218B एकूण (25B सक्रिय) | 27B |
| उपलब्धता | मुक्त स्रोत | मुक्त स्रोत |
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
मॉडेल जनरेशन शोकेस
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#387 Command A+
high
Provider returned error
- खर्च
- $0.000
- वेळ
- 0.2s
- टोकन्स
- 0 tok
#395 Decider V1.1 27B
default
या मॉडेलसाठी अद्याप कोणताही शोकेस निकाल तयार झालेला नाही.
- खर्च
- लागू नाही
- वेळ
- -
- टोकन्स
- 0 tok
श्रेणीवार तपशील
| स्वायत्त एजंट कार्ये | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.9 | 9.6 | 0.0% | 0 | 156.00s | 117,966 | 5,149 | 23,514 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| अँटी-एआय युक्त्या | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 85.94s | 0 | 0 | 0 | |
| Decider V1.1 27B | 4.0 | 7.5 | 25.0% | 0 | 321ms | 7,161 | 9 | 0 |
| कोडिंग | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 92.74s | 0 | 0 | 0 | |
| Decider V1.1 27B | 4.9 | 6.7 | 33.3% | 0 | 305ms | 32,733 | 12 | 0 |
| संयुक्त | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 80.65s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| डेटा पार्सिंग आणि निष्कर्षण | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 86.20s | 0 | 0 | 0 | |
| Decider V1.1 27B | 6.5 | 10.0 | 50.0% | 0 | 286ms | 24,396 | 15 | 0 |
| डोमेन-विशिष्ट | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 67.89s | 0 | 0 | 0 | |
| Decider V1.1 27B | 5.3 | 10.0 | 33.3% | 0 | 313ms | 2,874 | 9 | 0 |
| Samanya Buddhimatta | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 99.30s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| सूचनांचे पालन | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 110.33s | 0 | 0 | 0 | |
| Decider V1.1 27B | 1.5 | 5.0 | 0.0% | 0 | 333ms | 5,862 | 21 | 0 |
| कोडी सोडवणे | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 86.20s | 0 | 0 | 0 | |
| Decider V1.1 27B | 1.7 | 3.3 | 0.0% | 0 | 422ms | 531 | 3 | 0 |
| टूल कॉलिंग | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 84.61s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| सामान्य ज्ञान | स्कोअर | सुसंगतता | प्रति प्रयत्न पास दर | अस्थिर चाचण्या | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) | इनपुट टोकन्स | आउटपुट टोकन्स | रिझनिंग टोकन्स |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 90.50s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
झटपट तुलना
तुलना जोडी बदला
Command A+highvsGrok 4.20noneCommand A+lowvsDecider V1.1 27BdefaultCommand A+nonevsDecider V1.1 27BdefaultCommand A+highvsLing 3.0 TinymediumCommand A+highvsLing 3.0 TinylowCommand A+highvsJev 1.13defaultCommand A+highvsNemotron 3.5 Lightningnoneमोफत उपलब्धCommand A+highvsGranite 4.1 8bdefaultCommand A+highvsLing 3.0 TinydefaultGemini 3 Flash PreviewhighvsDecider V1.1 27BdefaultCommand A+highvsGPT-6 Luna DecisionsdefaultCommand A+highvsKev 4Bdefault