AI BENCHY
Advertise here
#153

Granite 4.1 8B

IBM Granite रिलीज़: 2026-05-01 परीक्षण किया गया: 2026-05-22 00:30 ibm-granite/granite-4.1-8b::none

सारांश

Granite 4.1 8B AI BENCHY पर 4.1 स्कोर करता है और #153 पर है। इसकी reliability 10.0, pass rate 10.0%, कुल लागत $0.003, और औसत response time 723ms है।

Granite 4.1 8B को अलग क्या बनाता है: यह समान मॉडलों की तुलना में काफ़ी तेज है।

संगति

10.0

कुल आउटपुट टोकन

2,742

कुल इनपुट टोकन

0

इनपुट कीमत

$0.050 / 1M

आउटपुट कीमत

$0.100 / 1M

सही परीक्षण

गलत टेस्ट: 18

प्रति प्रयास पास दर: 10.0%

अस्थिर टेस्ट

0

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

723ms

प्रतिक्रिया समय (अधिकतम): 2.17s

प्रतिक्रिया समय (कुल): 14.45s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#153 IBM: Granite 4.1 8B

none
लागत
$0.001
समय
3.2s
टोकन
491 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-07-16 23:04 नया टेस्ट जोड़ा गया 4.0 10.0 $0.007 तुलना करें
2026-06-04 14:07 नया टेस्ट जोड़ा गया 4.0 10.0 $0.003 तुलना करें
2026-05-22 00:30 सूट बदला गया 4.1 10.0 $0.003 वर्तमान रन
2026-05-01 00:31 पहला रन 4.3 10.0 $0.003 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-05-22 00:30 · सूट बदला गया4.110.010.02/2002,7420$0.003723ms
2026-06-04 14:07 · नया टेस्ट जोड़ा गया4.010.010.02/2102,91146,285$0.003728ms
अंतर+0.10.00.000-169-46285-$0.001-5ms

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 4.9 10.0
कोडिंग 5.2 10.0
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 3.0 10.0
डोमेन-विशिष्ट 3.0 10.0
Samanya Buddhimatta 4.0 10.0
निर्देश पालन 3.6 9.9
पहेली समाधान 3.2 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल