- स्कोअर
- 8.6 (+1.22 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.061 · 88.5% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 7.51s · 55.8% वेगवान
सारांश
Inkling AI BENCHY वर 7.4 स्कोर करते आणि #156 वर आहे. याची reliability 10.0, pass rate 75.4%, एकूण खर्च $0.527, आणि सरासरी response time 16.98s आहे.
Inkling खास का आहे: हे Samanya Buddhimatta मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर टूल कॉलिंग हा सर्वात कमकुवत भाग आहे, rank #16.
शिफारस केलेले पर्याय
त्याऐवजी यापैकी एक मॉडेल निवडण्याची शिफारस करतो:
- स्कोअर
- 8.3 (+0.91 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.047 · 91.1% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 18.07s · 6.4% संथ
- स्कोअर
- 9.4 (+2.00 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.183 · 65.4% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 6.24s · 63.2% वेगवान
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- 975B एकूण (41B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- मुक्त स्रोत
- परवाना
- Apache-2.0
7.4
सुसंगतता
8.2
10.0
एकूण आउटपुट टोकन्स
69,605
एकूण इनपुट टोकन्स
257,138
इनपुट किंमत
$0.950 / 1M
आउटपुट किंमत
$4.050 / 1M
कॅश वाचण्याची किंमत
$0.160 / 1M
कॅश लिहिण्याची किंमत
लागू नाही
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
अस्थिर चाचण्या
5
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#156 Thinking Machines: Inkling
medium- खर्च
- $0.004
- वेळ
- 11.2s
- टोकन्स
- 852 tok
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-10-01 03:34 पुन्हा चाचणी | 7.4 | 10.0 | $0.527 ↓ | सध्याची रन | |
| 2026-07-18 15:45 पहिला रन | 8.0 | 9.8 | $0.391 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 03:34 · सध्याची रन | 69/69 प्रयत्न | 7.4 | 8.2 | 10.0 | 15/23 | 5 | 69,605 | 257,138 | $0.527 | 16.98s |
| 2026-07-18 15:45 · पहिला रन | 66/66 प्रयत्न | 8.0 | 8.2 | 9.8 | 15/22 | 5 | 65,786 | 124,053 | $0.391 | 16.21s |
| फरक | — | -0.6 | 0.0 | +0.2 | 0 | 0 | +3819 | +133085 | +$0.136 | +770ms |
बेंचमार्क कव्हरेज वेगळे आहे: 69/69 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत | कॅश वाचण्याची किंमत | कॅश लिहिण्याची किंमत |
|---|---|---|---|---|
| 2026-07-18 15:56 | $1.000 / 1M | $4.050 / 1M | लागू नाही | लागू नाही |
| 2026-08-14 12:51 | $0.950 / 1M | $4.050 / 1M | लागू नाही | लागू नाही |
| 2026-10-02 09:43 | $0.950 / 1M | $4.050 / 1M | $0.160 / 1M | लागू नाही |
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| स्वायत्त एजंट कार्ये | 4.7 | 1.6 | |
| अँटी-एआय युक्त्या | 8.7 | 9.5 | |
| कोडिंग | 8.4 | 7.8 | |
| संयुक्त | 7.3 | 5.8 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| सूचनांचे पालन | 9.8 | 10.0 | |
| कोडी सोडवणे | 10.0 | 10.0 | |
| टूल कॉलिंग | 3.0 | 10.0 | |
| सामान्य ज्ञान | 2.8 | 1.6 |