AI BENCHY
Advertise here
#119

Inkling

Thinkingmachines प्रकाशन: 2026-07-18 चाचणी तारीख: 2026-07-18 15:45 thinkingmachines/inkling::low
975B एकूण (41B सक्रिय)MoEमुक्त स्रोत

सारांश

Inkling AI BENCHY वर 6.1 स्कोर करते आणि #119 वर आहे. याची reliability 9.9, pass rate 54.6%, एकूण खर्च $0.187, आणि सरासरी response time 5.15s आहे.

Inkling खास का आहे: हे Samanya Buddhimatta मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर संयुक्त हा सर्वात कमकुवत भाग आहे, rank #18.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
975B एकूण (41B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
Apache-2.0

सुसंगतता

8.6

एकूण आउटपुट टोकन्स

18,922

एकूण इनपुट टोकन्स

109,884

इनपुट किंमत

$1.000 / 1M

आउटपुट किंमत

$4.050 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 12

प्रति प्रयत्न पास दर: 54.6%

अस्थिर चाचण्या

4

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

5.15s

प्रतिसाद वेळ (कमाल): 41.58s

प्रतिसाद वेळ (एकूण): 113.39s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#119 Thinking Machines: Inkling

low
खर्च
$0.002
वेळ
6.1s
टोकन्स
502 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 03:51 पुन्हा चाचणी 6.1 10.0 $0.181 तुलना करा
2026-07-18 15:45 पहिला रन 6.1 9.9 $0.187 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-07-18 15:45 · पहिला रन66/66 प्रयत्न6.18.69.910/22418,922109,884$0.1875.15s
2026-08-14 03:51 · पुन्हा चाचणी66/66 प्रयत्न6.18.610.010/22418,904109,893$0.1815.11s
फरक0.00.0-0.100+18-9+$0.006+42ms

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-07-18 15:56 $1.000 / 1M $4.050 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 8.3 10.0
कोडिंग 5.1 7.2
संयुक्त 2.9 5.8
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 9.8 10.0
कोडी सोडवणे 6.4 5.0
टूल कॉलिंग 3.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स