AI BENCHY
Advertise here
#52

Inkling

Thinkingmachines प्रकाशन: 2026-07-18 चाचणी तारीख: 2026-08-14 03:55 thinkingmachines/inkling::high
975B एकूण (41B सक्रिय)MoEमुक्त स्रोत
(high) (medium) (low) (none)

सारांश

Inkling AI BENCHY वर 8.0 स्कोर करते आणि #52 वर आहे. याची reliability 10.0, pass rate 77.3%, एकूण खर्च $1.041, आणि सरासरी response time 62.57s आहे.

Inkling खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडी सोडवणे हा सर्वात कमकुवत भाग आहे, rank #14.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
975B एकूण (41B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
Apache-2.0
पॅरामीटर स्रोत उपलब्धता स्रोत

स्कोअर

8.0

सुसंगतता

8.9

विश्वसनीयता

10.0

एकूण खर्च (सध्याची किंमत)

$1.041 ↓ -0.4%

या किमतीवर चाचणी केली: $1.046

एकूण आउटपुट टोकन्स

236,627

एकूण इनपुट टोकन्स

86,755

इनपुट किंमत

$0.950 / 1M

आउटपुट किंमत

$4.050 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 7

प्रति प्रयत्न पास दर: 77.3%

अस्थिर चाचण्या

3

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

62.57s

प्रतिसाद वेळ (कमाल): 327.51s

प्रतिसाद वेळ (एकूण): 1376.46s

चुकीचे उत्तर: 4 अवैध टूल कॉल: 2 सूचनांचे पालन केले नाही: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#52 Thinking Machines: Inkling

high
खर्च
$0.005
वेळ
32.2s
टोकन्स
1,275 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 03:55 पुन्हा चाचणी 8.0 10.0 $1.041 ↓ सध्याची रन
2026-07-18 15:53 पहिला रन 8.0 9.8 $1.006 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-07-18 15:56 $1.000 / 1M $4.050 / 1M
2026-08-14 12:51 $0.950 / 1M $4.050 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

InklinghighvsMuse Glimmer 30BxhighInklinghighvsMuse Spark 1.1highInklinghighvsGPT-5 MinimediumInklinghighvsDeepSeek V4 Flash 0731lowInklinghighvsQwen3.8 2.4T A95BlowInklinghighvsDeepSeek V4 Flash 0731highInklinghighvsClaude Sonnet 5mediumInklinghighvsGLM 5.2highInklinghighvsGemini 2.5 FlashmediumInklinghighvsInklingmedium

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 10.0 10.0
कोडिंग 8.5 10.0
संयुक्त 7.3 5.8
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 7.7 10.0
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 9.8 10.0
कोडी सोडवणे 6.9 4.9
टूल कॉलिंग 3.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स