- स्कोर
- 8.6 (+2.52 अंक)
- कुल लागत (वर्तमान कीमत)
- $0.061 · 91.9% सस्ता
- प्रतिक्रिया समय (औसत)
- 7.51s · 69.9% तेज़
सारांश
KAT-Coder-Pro V2.5 AI BENCHY पर 6.1 स्कोर करता है और #258 पर है। इसकी reliability 10.0, pass rate 68.1%, कुल लागत $0.742, और औसत response time 24.96s है।
KAT-Coder-Pro V2.5 को अलग क्या बनाता है: यह पहेली समाधान में सबसे अलग दिखता है, जहाँ इसकी रैंक #3 है; जबकि स्वायत्त एजेंट कार्य इसकी सबसे कमजोर जगह है, जहाँ यह #13 पर है।
सुझाए गए विकल्प
हम इसकी जगह इनमें से एक मॉडल चुनने की सलाह देते हैं:
- स्कोर
- 8.3 (+2.21 अंक)
- कुल लागत (वर्तमान कीमत)
- $0.047 · 93.7% सस्ता
- प्रतिक्रिया समय (औसत)
- 18.07s · 27.6% तेज़
- स्कोर
- 9.4 (+3.31 अंक)
- कुल लागत (वर्तमान कीमत)
- $0.183 · 75.4% सस्ता
- प्रतिक्रिया समय (औसत)
- 6.24s · 75.0% तेज़
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- ~700B कुल (~72B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- बंद स्रोत
- लाइसेंस
- -
सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।
6.1
संगति
7.1
10.0
कुल आउटपुट टोकन
139,572
कुल इनपुट टोकन
98,508
इनपुट कीमत
$0.740 / 1M
आउटपुट कीमत
$2.960 / 1M
कैश पढ़ने की कीमत
$0.150 / 1M
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
8
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#258 KAT-Coder-Pro V2.5
default- लागत
- $0.010
- समय
- 29.0s
- टोकन
- 3,439 tok
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-10-01 03:00 दोबारा परीक्षण | 6.1 | 10.0 | $0.742 ↑ | वर्तमान रन | |
| 2026-07-16 23:43 नया टेस्ट जोड़ा गया | 6.7 | 10.0 | $0.476 | तुलना करें | |
| 2026-07-14 11:05 पहला रन | 6.8 | 10.0 | $0.220 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 03:00 · वर्तमान रन | 69/69 प्रयास | 6.1 | 7.1 | 10.0 | 11/23 | 8 | 139,572 | 98,508 | $0.742 | 24.96s |
| 2026-07-16 23:43 · नया टेस्ट जोड़ा गया | 66/66 प्रयास | 6.7 | 7.4 | 10.0 | 11/22 | 7 | 135,861 | 98,499 | $0.476 | 25.56s |
| अंतर | — | -0.6 | -0.3 | 0.0 | 0 | +1 | +3711 | +9 | +$0.267 | -603ms |
बेंचमार्क कवरेज अलग है: 69/69 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
कीमत का इतिहास
OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।
| तारीख | इनपुट कीमत | आउटपुट कीमत | कैश पढ़ने की कीमत | कैश लिखने की कीमत |
|---|---|---|---|---|
| 2026-08-14 12:51 | $0.740 / 1M | $2.960 / 1M | लागू नहीं | लागू नहीं |
| 2026-10-01 18:33 | $0.740 / 1M | $2.960 / 1M | $0.150 / 1M | लागू नहीं |
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| स्वायत्त एजेंट कार्य | 3.0 | 10.0 | |
| एंटी-एआई ट्रिक्स | 8.7 | 7.9 | |
| कोडिंग | 6.1 | 4.7 | |
| संयुक्त | 4.1 | 5.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 4.1 | 4.4 | |
| Samanya Buddhimatta | 4.8 | 3.2 | |
| निर्देश पालन | 9.8 | 10.0 | |
| पहेली समाधान | 8.2 | 7.2 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |