AI BENCHY
Advertise here
#173

KAT-Coder-Air V2.5

Kwaipilot प्रकाशन: 2026-07-14 चाचणी तारीख: 2026-07-16 23:28 kwaipilot/kat-coder-air-v2.5::none
~35B एकूण (~3B सक्रिय)MoEबंद स्रोतअंदाजित

सारांश

KAT-Coder-Air V2.5 AI BENCHY वर 4.8 स्कोर करते आणि #173 वर आहे. याची reliability 10.0, pass rate 37.9%, एकूण खर्च $0.067, आणि सरासरी response time 12.17s आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~35B एकूण (~3B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

6.9

एकूण आउटपुट टोकन्स

93,913

एकूण इनपुट टोकन्स

69,367

इनपुट किंमत

$0.150 / 1M

आउटपुट किंमत

$0.600 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 17

प्रति प्रयत्न पास दर: 37.9%

अस्थिर चाचण्या

8

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

12.17s

प्रतिसाद वेळ (कमाल): 121.05s

प्रतिसाद वेळ (एकूण): 267.83s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#173 KAT-Coder-Air V2.5

none
खर्च
$0.002
वेळ
14.5s
टोकन्स
2,619 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 03:15 पुन्हा चाचणी 4.8 10.0 $0.070 तुलना करा
2026-07-16 23:28 नवीन चाचणी जोडली 4.8 10.0 $0.067 सध्याची रन
2026-07-14 11:05 पहिला रन 4.9 10.0 $0.037 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-07-16 23:28 · नवीन चाचणी जोडली66/66 प्रयत्न4.86.910.05/22893,91369,367$0.06712.17s
2026-08-14 03:15 · पुन्हा चाचणी66/66 प्रयत्न4.87.210.05/22797,75269,376$0.07012.46s
फरक0.0-0.30.00+1-3839-9-$0.003-285ms

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-07-14 11:25 $0.150 / 1M $0.600 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 5.3 5.6
कोडिंग 3.3 9.6
संयुक्त 3.8 1.6
डेटा पार्सिंग आणि निष्कर्षण 6.3 5.8
डोमेन-विशिष्ट 2.9 7.2
Samanya Buddhimatta 5.0 10.0
सूचनांचे पालन 9.9 10.0
कोडी सोडवणे 2.9 4.4
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स