AI BENCHY
Advertise here
#44

Inkling Small

Thinkingmachines प्रकाशन: 2026-08-01 चाचणी तारीख: 2026-08-14 03:57 thinkingmachines/inkling-small::high
276B एकूण (12B सक्रिय)MoEबंद स्रोत
(high) (medium) (low) (none)

सारांश

Inkling Small AI BENCHY वर 8.4 स्कोर करते आणि #44 वर आहे. याची reliability 10.0, pass rate 69.7%, एकूण खर्च $0.398, आणि सरासरी response time 30.43s आहे.

Inkling Small खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #4 आहे; तर कोडी सोडवणे हा सर्वात कमकुवत भाग आहे, rank #17.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
276B एकूण (12B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-
पॅरामीटर स्रोत उपलब्धता स्रोत

स्कोअर

8.4

सुसंगतता

9.2

विश्वसनीयता

10.0

एकूण खर्च (सध्याची किंमत)

$0.398 ↓ -1.1%

या किमतीवर चाचणी केली: $0.402

एकूण आउटपुट टोकन्स

298,893

एकूण इनपुट टोकन्स

85,669

इनपुट किंमत

$0.450 / 1M

आउटपुट किंमत

$1.200 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 8

प्रति प्रयत्न पास दर: 69.7%

अस्थिर चाचण्या

2

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

30.43s

प्रतिसाद वेळ (कमाल): 122.60s

प्रतिसाद वेळ (एकूण): 669.38s

चुकीचे उत्तर: 6 सूचनांचे पालन केले नाही: 2

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#44 Thinking Machines: Inkling Small

high
खर्च
$0.006
वेळ
34.7s
टोकन्स
4,735 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 03:57 पुन्हा चाचणी 8.4 10.0 $0.398 ↓ सध्याची रन
2026-08-01 13:02 पहिला रन 8.4 10.0 $0.416 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-08-14 03:57 · सध्याची रन66/66 प्रयत्न8.49.210.014/222298,89385,669$0.39830.43s
2026-08-01 13:02 · पहिला रन66/66 प्रयत्न8.49.210.014/222310,38885,660$0.41631.70s
फरक—0.00.00.000-11495+9-$0.019-1269ms

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-08-01 13:27 $0.500 / 1M $1.200 / 1M
2026-08-14 12:51 $0.450 / 1M $1.200 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

Inkling SmallhighvsSeed 2.1 TurbomediumInkling SmallhighvsMuse Spark 1.1lowInkling SmallhighvsQwen3.8 27BhighInkling SmallhighvsGemini 2.5 FlashmediumInkling SmallhighvsGPT-5.2mediumInkling SmallhighvsClaude Sonnet 5mediumInkling SmallhighvsGrok 4.5lowInkling SmallhighvsQwen3.8 2.4T A95BlowInkling SmallhighvsGrok 4.6mediumInkling SmallhighvsGPT-5 Minimedium

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 10.0 10.0
कोडिंग 10.0 10.0
संयुक्त 9.9 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 5.3 10.0
सूचनांचे पालन 9.8 10.0
कोडी सोडवणे 4.8 4.4
टूल कॉलिंग 3.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स