AI BENCHY
Advertise here
#119

Inkling

Thinkingmachines रिलीज़: 2026-07-18 परीक्षण किया गया: 2026-07-18 15:45 thinkingmachines/inkling::low
975B कुल (41B सक्रिय)MoEमुक्त स्रोत

सारांश

Inkling AI BENCHY पर 6.1 स्कोर करता है और #119 पर है। इसकी reliability 9.9, pass rate 54.6%, कुल लागत $0.187, और औसत response time 5.15s है।

Inkling को अलग क्या बनाता है: यह Samanya Buddhimatta में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि संयुक्त इसकी सबसे कमजोर जगह है, जहाँ यह #18 पर है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

घोषित
पैरामीटर
975B कुल (41B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
लाइसेंस
Apache-2.0

संगति

8.6

कुल आउटपुट टोकन

18,922

कुल इनपुट टोकन

109,884

इनपुट कीमत

$1.000 / 1M

आउटपुट कीमत

$4.050 / 1M

सही परीक्षण

गलत टेस्ट: 12

प्रति प्रयास पास दर: 54.6%

अस्थिर टेस्ट

4

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

5.15s

प्रतिक्रिया समय (अधिकतम): 41.58s

प्रतिक्रिया समय (कुल): 113.39s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#119 Thinking Machines: Inkling

low
लागत
$0.002
समय
6.1s
टोकन
502 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-08-14 03:51 दोबारा परीक्षण 6.1 10.0 $0.181 तुलना करें
2026-07-18 15:45 पहला रन 6.1 9.9 $0.187 वर्तमान रन

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-07-18 15:45 · पहला रन66/66 प्रयास6.18.69.910/22418,922109,884$0.1875.15s
2026-08-14 03:51 · दोबारा परीक्षण66/66 प्रयास6.18.610.010/22418,904109,893$0.1815.11s
अंतर0.00.0-0.100+18-9+$0.006+42ms

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

कीमत का इतिहास

OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।

तारीख इनपुट कीमत आउटपुट कीमत
2026-07-18 15:56 $1.000 / 1M $4.050 / 1M

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 8.3 10.0
कोडिंग 5.1 7.2
संयुक्त 2.9 5.8
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 10.0 10.0
निर्देश पालन 9.8 10.0
पहेली समाधान 6.4 5.0
टूल कॉलिंग 3.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल