#67 MoonshotAI: Kimi K2.7 Code
medium- खर्च
- $0.025
- वेळ
- 138.0s
- टोकन्स
- 6,093 tok
सारांश
Kimi K2.7 Code AI BENCHY वर 7.0 स्कोर करते आणि #67 वर आहे. याची reliability 9.2, pass rate 66.7%, एकूण खर्च $0.669, आणि सरासरी response time 83.60s आहे.
Kimi K2.7 Code खास का आहे: हे सूचनांचे पालन मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #4 आहे; तर संयुक्त हा सर्वात कमकुवत भाग आहे, rank #18.
संशोधन दिनांक: 2026-08-12
7.0
सुसंगतता
7.7
9.2
$0.669
एकूण आउटपुट टोकन्स
241,907
एकूण इनपुट टोकन्स
25,991
इनपुट किंमत
$0.950 / 1M
आउटपुट किंमत
$4.000 / 1M
अस्थिर चाचण्या
6
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:05 पुन्हा चाचणी | 7.4 | 10.0 | $0.709 ↓ | तुलना करा | |
| 2026-07-16 22:20 नवीन चाचणी जोडली | 7.5 | 10.0 | $0.690 ↓ | तुलना करा | |
| 2026-06-12 18:35 पहिला रन | 7.0 | 9.2 | $0.669 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-06-12 18:35 · पहिला रन | 63/63 प्रयत्न | 7.0 | 7.7 | 9.2 | 11/21 | 6 | 241,907 | 25,991 | $0.669 | 83.60s |
| 2026-08-14 02:05 · पुन्हा चाचणी | 66/66 प्रयत्न | 7.4 | 8.0 | 10.0 | 11/22 | 5 | 239,546 | 72,085 | $0.709 | 80.09s |
| फरक | — | -0.4 | -0.3 | -0.8 | 0 | +1 | +2361 | -46094 | -$0.041 | +3512ms |
बेंचमार्क कव्हरेज वेगळे आहे: 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत |
|---|---|---|
| 2026-06-12 18:36 | $0.950 / 1M | $4.000 / 1M |
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 7.3 | 5.8 | |
| कोडिंग | 7.6 | 7.2 | |
| संयुक्त | 4.7 | 1.6 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| सूचनांचे पालन | 9.9 | 10.0 | |
| कोडी सोडवणे | 5.9 | 7.7 | |
| टूल कॉलिंग | 3.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |