AI BENCHY
Advertise here
#82

Kimi K2.5

Moonshot AI प्रकाशन: 2026-01-27 चाचणी तारीख: 2026-04-20 17:48 moonshotai/kimi-k2.5::none
1T एकूण (32B सक्रिय)MoEवेट्स उपलब्ध
(medium) (none)

सारांश

Kimi K2.5 AI BENCHY वर 5.5 स्कोर करते आणि #82 वर आहे. याची reliability लागू नाही, pass rate 40.7%, एकूण खर्च $0.017, आणि सरासरी response time 13.37s आहे.

Kimi K2.5 खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #17. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
1T एकूण (32B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
वेट्स उपलब्ध
परवाना
Modified MIT

सुसंगतता

8.7

विश्वसनीयता

लागू नाही

एकूण आउटपुट टोकन्स

2,659

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.440 / 1M

आउटपुट किंमत

$2.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 12

प्रति प्रयत्न पास दर: 40.7%

अस्थिर चाचण्या

3

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

13.37s

प्रतिसाद वेळ (कमाल): 42.13s

प्रतिसाद वेळ (एकूण): 147.05s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#82 MoonshotAI: Kimi K2.5

none
खर्च
$0.015
वेळ
89.1s
टोकन्स
5,421 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 01:55 पुन्हा चाचणी 5.4 10.0 $0.127 तुलना करा
2026-07-16 22:13 नवीन चाचणी जोडली 5.5 10.0 $0.127 तुलना करा
2026-06-04 13:32 नवीन चाचणी जोडली 5.2 10.0 $0.028 तुलना करा
2026-05-22 00:03 सूट बदलला 5.3 10.0 $0.026 तुलना करा
2026-04-20 17:48 पहिली नोंदलेली रन 5.5 लागू नाही $0.017 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-04-20 17:48 · पहिली नोंदलेली रन54/54 प्रयत्न5.58.7लागू नाही6/1832,6590$0.01713.37s
2026-07-16 22:13 · नवीन चाचणी जोडली66/66 प्रयत्न5.58.610.06/22426,63889,322$0.12719.15s
फरक0.0+0.10-1-23979-89322-$0.111-5786ms

बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 3.6 8.4
कोडिंग 10.0 10.0
संयुक्त 2.8 2.1
डेटा पार्सिंग आणि निष्कर्षण 7.3 5.8
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 6.5 10.0
कोडी सोडवणे 3.1 10.0
टूल कॉलिंग 10.0 10.0

तुलना केलेली मॉडेल्स