#150

KAT-Coder-Air V2.5

Kwaipilot प्रकाशन: 2026-07-14 चाचणी तारीख: 2026-07-16 23:32 kwaipilot/kat-coder-air-v2.5::low

~35B एकूण (~3B सक्रिय)MoEबंद स्रोतअंदाजित

(high) (medium) (low) (none)

सारांश

KAT-Coder-Air V2.5 AI BENCHY वर 5.4 स्कोर करते आणि #150 वर आहे. याची reliability 9.9, pass rate 45.5%, एकूण खर्च $0.041, आणि सरासरी response time 10.09s आहे.

KAT-Coder-Air V2.5 खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित

पॅरामीटर्स: ~35B एकूण (~3B सक्रिय)
आर्किटेक्चर: MoE
उपलब्धता: बंद स्रोत
परवाना: -

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

पॅरामीटर स्रोत उपलब्धता स्रोत

स्कोअर

5.4

सुसंगतता

7.4

विश्वसनीयता

9.9

एकूण खर्च (सध्याची किंमत)

$0.041

एकूण आउटपुट टोकन्स

52,895

एकूण इनपुट टोकन्स

61,085

इनपुट किंमत

$0.150 / 1M

आउटपुट किंमत

$0.600 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 15

प्रति प्रयत्न पास दर: 45.5%

अस्थिर चाचण्या

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

10.09s

प्रतिसाद वेळ (कमाल): 86.23s

प्रतिसाद वेळ (एकूण): 222.03s

चुकीचे उत्तर: 7 अतिरिक्त फॉरमॅटिंग: 4 API त्रुटी: 2 सूचनांचे पालन केले नाही: 2

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#150 KAT-Coder-Air V2.5

low

खर्च: $0.004
वेळ: 29.9s
टोकन्स: 6,008 tok

रन इतिहास

चाचणी तारीख	स्कोअर	विश्वसनीयता	एकूण खर्च	तुलना करा
2026-08-14 03:16 पुन्हा चाचणी	5.4	9.9	$0.046	तुलना करा
2026-07-16 23:32 नवीन चाचणी जोडली	5.4	9.9	$0.041	सध्याची रन
2026-07-14 11:05 पहिला रन	6.0	9.7	$0.030	तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रन	बेंचमार्क कव्हरेज	स्कोअर	सुसंगतता	विश्वसनीयता	बरोबर चाचण्या	अस्थिर चाचण्या	एकूण आउटपुट टोकन्स	एकूण इनपुट टोकन्स	एकूण खर्च	प्रतिसाद वेळ (सरासरी)
2026-07-16 23:32 · नवीन चाचणी जोडली	66/66 प्रयत्न	5.4	7.4	9.9	7/22	7	52,895	61,085	$0.041	10.09s
2026-07-14 11:05 · पहिला रन	63/63 प्रयत्न	6.0	7.6	9.7	7/21	6	39,091	42,464	$0.030	6.47s
फरक	—	-0.6	-0.2	+0.2	0	+1	+13804	+18621	+$0.012	+3626ms

बेंचमार्क कव्हरेज वेगळे आहे: 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख	इनपुट किंमत	आउटपुट किंमत
2026-07-14 11:25	$0.150 / 1M	$0.600 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी	स्कोअर	सुसंगतता
अँटी-एआय युक्त्या	7.3	5.8
कोडिंग	3.5	7.3
संयुक्त	6.4	5.8
डेटा पार्सिंग आणि निष्कर्षण	6.5	10.0
डोमेन-विशिष्ट	2.9	7.2
Samanya Buddhimatta	5.0	10.0
सूचनांचे पालन	9.8	10.0
कोडी सोडवणे	3.1	4.6
टूल कॉलिंग	10.0	10.0
सामान्य ज्ञान	3.0	10.0

KAT-Coder-Air V2.5

मॉडेलची माहिती

Hamster playing table tennis

#150 KAT-Coder-Air V2.5

चार्ट्स

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर vs एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

तुलना केलेली मॉडेल्स