- स्कोअर
- 8.6 (+2.36 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.061 · 91.0% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 7.51s · 68.6% वेगवान
Kwaipilot
प्रकाशन: 2026-07-14
चाचणी तारीख: 2026-10-01 03:00
kwaipilot/kat-coder-pro-v2.5::medium
~700B एकूण (~72B सक्रिय)MoEबंद स्रोतअंदाजित
सारांश
KAT-Coder-Pro V2.5 AI BENCHY वर 6.2 स्कोर करते आणि #246 वर आहे. याची reliability 10.0, pass rate 62.3%, एकूण खर्च $0.669, आणि सरासरी response time 23.94s आहे.
KAT-Coder-Pro V2.5 खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #2 आहे; तर डोमेन-विशिष्ट हा सर्वात कमकुवत भाग आहे, rank #14.
शिफारस केलेले पर्याय
त्याऐवजी यापैकी एक मॉडेल निवडण्याची शिफारस करतो:
- स्कोअर
- 8.3 (+2.05 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.047 · 93.0% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 18.07s · 24.5% वेगवान
- स्कोअर
- 9.4 (+3.15 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.183 · 72.8% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 6.24s · 73.9% वेगवान
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- ~700B एकूण (~72B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- बंद स्रोत
- परवाना
- -
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
6.2
सुसंगतता
7.2
10.0
एकूण आउटपुट टोकन्स
139,375
एकूण इनपुट टोकन्स
87,916
इनपुट किंमत
$0.740 / 1M
आउटपुट किंमत
$2.960 / 1M
कॅश वाचण्याची किंमत
$0.150 / 1M
कॅश लिहिण्याची किंमत
लागू नाही
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
अस्थिर चाचण्या
8
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#246 KAT-Coder-Pro V2.5
medium- खर्च
- $0.009
- वेळ
- 25.6s
- टोकन्स
- 2,939 tok
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-10-01 03:00 पुन्हा चाचणी | 6.2 | 10.0 | $0.669 ↑ | सध्याची रन | |
| 2026-07-16 23:47 नवीन चाचणी जोडली | 6.9 | 10.0 | $0.467 | तुलना करा | |
| 2026-07-14 11:05 पहिला रन | 7.5 | 10.0 | $0.275 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 03:00 · सध्याची रन | 69/69 प्रयत्न | 6.2 | 7.2 | 10.0 | 11/23 | 8 | 139,375 | 87,916 | $0.669 | 23.94s |
| 2026-07-16 23:47 · नवीन चाचणी जोडली | 66/66 प्रयत्न | 6.9 | 7.4 | 10.0 | 11/22 | 7 | 135,464 | 87,907 | $0.467 | 24.04s |
| फरक | — | -0.7 | -0.2 | 0.0 | 0 | +1 | +3911 | +9 | +$0.203 | -106ms |
बेंचमार्क कव्हरेज वेगळे आहे: 69/69 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत | कॅश वाचण्याची किंमत | कॅश लिहिण्याची किंमत |
|---|---|---|---|---|
| 2026-08-14 12:51 | $0.740 / 1M | $2.960 / 1M | लागू नाही | लागू नाही |
| 2026-10-01 18:33 | $0.740 / 1M | $2.960 / 1M | $0.150 / 1M | लागू नाही |
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
KAT-Coder-Pro V2.5mediumvsSpace Bunny AlphaxhighKAT-Coder-Pro V2.5mediumvsDeepSeek V4 Flash 0731noneKAT-Coder-Pro V2.5mediumvsGrok 4.20mediumKAT-Coder-Pro V2.5mediumvsGemini 3.1 Flash Lite PreviewnoneKAT-Coder-Pro V2.5mediumvsDeepSeek V4 Flash 0423noneKAT-Coder-Pro V2.5mediumvsClaude Fable 5.1lowKAT-Coder-Pro V2.5mediumvsTrinity Large ThinkinglowKAT-Coder-Pro V2.5mediumvsGemini 3.5 FlashnoneKAT-Coder-Pro V2.5mediumvsDeepSeek V3.2mediumKAT-Coder-Pro V2.5mediumvsTrinity Large Thinkingmedium
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| स्वायत्त एजंट कार्ये | 3.0 | 10.0 | |
| अँटी-एआय युक्त्या | 8.2 | 7.9 | |
| कोडिंग | 7.8 | 10.0 | |
| संयुक्त | 6.4 | 5.8 | |
| डेटा पार्सिंग आणि निष्कर्षण | 7.3 | 5.9 | |
| डोमेन-विशिष्ट | 2.9 | 4.4 | |
| Samanya Buddhimatta | 4.7 | 3.1 | |
| सूचनांचे पालन | 9.9 | 10.0 | |
| कोडी सोडवणे | 5.9 | 4.5 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |