AI BENCHY
Advertise here
#135

Granite 4.1 8B

IBM Granite प्रकाशन: 2026-05-01 चाचणी तारीख: 2026-05-01 00:31 ibm-granite/granite-4.1-8b::none

सारांश

Granite 4.1 8B AI BENCHY वर 4.3 स्कोर करते आणि #135 वर आहे. याची reliability 10.0, pass rate 11.1%, एकूण खर्च $0.003, आणि सरासरी response time 767ms आहे.

Granite 4.1 8B खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर डेटा पार्सिंग आणि निष्कर्षण हा सर्वात कमकुवत भाग आहे, rank #15. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

स्कोअर

4.3

सुसंगतता

10.0

विश्वसनीयता

10.0

एकूण खर्च (सध्याची किंमत)

$0.003

एकूण आउटपुट टोकन्स

2,712

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.050 / 1M

आउटपुट किंमत

$0.100 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 16

प्रति प्रयत्न पास दर: 11.1%

अस्थिर चाचण्या

0

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

767ms

प्रतिसाद वेळ (कमाल): 2.17s

प्रतिसाद वेळ (एकूण): 13.81s

चुकीचे उत्तर: 11 सूचनांचे पालन केले नाही: 4 अवैध टूल कॉल: 1

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#135 IBM: Granite 4.1 8B

none
Cost
$0.001
Time
3.2s
Tokens
491 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-06-04 14:07 नवीन चाचणी जोडली 4.0 10.0 $0.003 तुलना करा
2026-05-22 00:30 सूट बदलला 4.1 10.0 $0.003 तुलना करा
2026-05-01 00:31 पहिला रन 4.3 10.0 $0.003 सध्याची रन

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

Granite 4.1 8BnonevsGrok 4.20noneGranite 4.1 8BnonevsQwen3.5-122B-A10BnoneGranite 4.1 8BnonevsDeepSeek V3.2noneGranite 4.1 8BnonevsGLM 5 TurbononeGranite 4.1 8BnonevsMiniMax M2.7mediumGranite 4.1 8BnonevsGemini 3.5 FlashhighGranite 4.1 8BnonevsGemini 3 Flash PreviewmediumGranite 4.1 8BnonevsNemotron 3 Ultra 550b A55bmediumमोफत उपलब्धGranite 4.1 8BnonevsGPT-5.5low

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 4.9 10.0
कोडिंग 6.9 10.0
संयुक्त 3.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 3.0 10.0
डोमेन-विशिष्ट 3.0 10.0
Samanya Buddhimatta 4.0 10.0
सूचनांचे पालन 3.6 9.9
कोडी सोडवणे 3.7 10.0
टूल कॉलिंग 10.0 10.0

तुलना केलेली मॉडेल्स