- स्कोअर
- 8.6 (+3.41 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.061 · 20.8% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 7.51s · 50.7% वेगवान
सारांश
KAT Coder AIR V2.5 AI BENCHY वर 5.2 स्कोर करते आणि #315 वर आहे. याची reliability 9.8, pass rate 40.6%, एकूण खर्च $0.077, आणि सरासरी response time 15.23s आहे.
KAT Coder AIR V2.5 खास का आहे: हे संयुक्त मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर डेटा पार्सिंग आणि निष्कर्षण हा सर्वात कमकुवत भाग आहे, rank #12. हे असामान्यपणे जास्त reasoning tokens वापरते, ज्यामुळे runs हळू किंवा महाग होऊ शकतात.
शिफारस केलेले पर्याय
त्याऐवजी यापैकी एक मॉडेल निवडण्याची शिफारस करतो:
- स्कोअर
- 5.2 (+0.03 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.004 · 95.5% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 3.40s · 77.7% वेगवान
- स्कोअर
- 5.0 (-0.20 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.000 · 100.0% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 5.36s · 64.8% वेगवान
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- ~35B एकूण (~3B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- बंद स्रोत
- परवाना
- -
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
5.2
सुसंगतता
8.2
9.8
$0.077
एकूण आउटपुट टोकन्स
114,654
एकूण इनपुट टोकन्स
50,423
इनपुट किंमत
$0.150 / 1M
आउटपुट किंमत
$0.600 / 1M
कॅश वाचण्याची किंमत
लागू नाही
कॅश लिहिण्याची किंमत
लागू नाही
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
अस्थिर चाचण्या
5
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#315 KAT Coder AIR V2.5
high- खर्च
- $0.000
- वेळ
- 300.0s
- टोकन्स
- 0 tok
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-10-01 02:59 पुन्हा चाचणी | 5.2 | 9.8 | $0.077 | सध्याची रन | |
| 2026-07-16 23:35 नवीन चाचणी जोडली | 5.6 | 9.9 | $0.077 | तुलना करा | |
| 2026-07-14 11:05 पहिला रन | 6.2 | 9.7 | $0.064 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 02:59 · सध्याची रन | 69/69 प्रयत्न | 5.2 | 8.2 | 9.8 | 7/23 | 5 | 114,654 | 50,423 | $0.077 | 15.23s |
| 2026-07-16 23:35 · नवीन चाचणी जोडली | 66/66 प्रयत्न | 5.6 | 7.7 | 9.9 | 7/22 | 6 | 115,331 | 50,470 | $0.077 | 15.90s |
| फरक | — | -0.5 | +0.5 | -0.1 | 0 | -1 | -677 | -47 | -$0.001 | -667ms |
बेंचमार्क कव्हरेज वेगळे आहे: 69/69 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत | कॅश वाचण्याची किंमत | कॅश लिहिण्याची किंमत |
|---|---|---|---|---|
| 2026-08-14 12:51 | $0.150 / 1M | $0.600 / 1M | लागू नाही | लागू नाही |
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| स्वायत्त एजंट कार्ये | 3.0 | 10.0 | |
| अँटी-एआय युक्त्या | 6.9 | 5.8 | |
| कोडिंग | 4.3 | 7.3 | |
| संयुक्त | 6.5 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 6.5 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 5.1 | 10.0 | |
| सूचनांचे पालन | 9.8 | 10.0 | |
| कोडी सोडवणे | 3.5 | 4.4 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |