AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#153

Granite 4.1 8B

IBM Granite रिलीज़: 2026-05-01 परीक्षण किया गया: 2026-05-22 00:30 ibm-granite/granite-4.1-8b::none

सारांश

Granite 4.1 8B AI BENCHY पर 4.1 स्कोर करता है और #153 पर है। इसकी reliability 10.0, pass rate 10.0%, कुल लागत $0.003, और औसत response time 723ms है।

Granite 4.1 8B को अलग क्या बनाता है: यह कोडिंग में सबसे अलग दिखता है, जहाँ इसकी रैंक #3 है; जबकि निर्देश पालन इसकी सबसे कमजोर जगह है, जहाँ यह #13 पर है। यह समान मॉडलों की तुलना में काफ़ी तेज है।

संगति

10.0

कुल आउटपुट टोकन

2,742

कुल इनपुट टोकन

0

इनपुट कीमत

$0.050 / 1M

आउटपुट कीमत

$0.100 / 1M

सही परीक्षण

गलत टेस्ट: 18

प्रति प्रयास पास दर: 10.0%

अस्थिर टेस्ट

0

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

723ms

प्रतिक्रिया समय (अधिकतम): 2.17s

प्रतिक्रिया समय (कुल): 14.45s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#153 IBM: Granite 4.1 8B

none
Cost
$0.001
Time
3.2s
Tokens
491 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-06-04 14:07 नया टेस्ट जोड़ा गया 4.0 10.0 $0.003 तुलना करें
2026-05-22 00:30 सूट बदला गया 4.1 10.0 $0.003 वर्तमान रन
2026-05-01 00:31 पहला रन 4.3 10.0 $0.003 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 4.9 10.0
कोडिंग 5.2 10.0
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 3.0 10.0
डोमेन-विशिष्ट 3.0 10.0
Samanya Buddhimatta 4.0 10.0
निर्देश पालन 3.6 9.9
पहेली समाधान 3.2 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल