#141 KAT-Coder-Pro V2.5
none- खर्च
- $0.010
- वेळ
- 29.0s
- टोकन्स
- 3,439 tok
सारांश
KAT-Coder-Pro V2.5 AI BENCHY वर 6.7 स्कोर करते आणि #141 वर आहे. याची reliability 10.0, pass rate 71.2%, एकूण खर्च $0.487, आणि सरासरी response time 26.01s आहे.
संशोधन दिनांक: 2026-08-12
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
6.7
सुसंगतता
7.0
10.0
$0.487
एकूण आउटपुट टोकन्स
139,572
एकूण इनपुट टोकन्स
98,508
इनपुट किंमत
$0.740 / 1M
आउटपुट किंमत
$2.960 / 1M
अस्थिर चाचण्या
8
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 03:23 पुन्हा चाचणी | 6.7 | 10.0 | $0.487 | सध्याची रन | |
| 2026-07-16 23:43 नवीन चाचणी जोडली | 6.7 | 10.0 | $0.476 | तुलना करा | |
| 2026-07-14 11:05 पहिला रन | 6.8 | 10.0 | $0.220 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-08-14 03:23 · सध्याची रन | 66/66 प्रयत्न | 6.7 | 7.0 | 10.0 | 11/22 | 8 | 139,572 | 98,508 | $0.487 | 26.01s |
| 2026-07-16 23:43 · नवीन चाचणी जोडली | 66/66 प्रयत्न | 6.7 | 7.4 | 10.0 | 11/22 | 7 | 135,861 | 98,499 | $0.476 | 25.56s |
| फरक | — | 0.0 | -0.4 | 0.0 | 0 | +1 | +3711 | +9 | +$0.011 | +445ms |
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत |
|---|---|---|
| 2026-08-14 12:51 | $0.740 / 1M | $2.960 / 1M |
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 8.7 | 7.9 | |
| कोडिंग | 6.1 | 4.7 | |
| संयुक्त | 4.1 | 5.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 4.1 | 4.4 | |
| Samanya Buddhimatta | 4.8 | 3.2 | |
| सूचनांचे पालन | 9.8 | 10.0 | |
| कोडी सोडवणे | 8.2 | 7.2 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |