#153 IBM: Granite 4.1 8B
none- Cost
- $0.001
- Time
- 3.2s
- Tokens
- 491 tok
IBM Granite
प्रकाशन: 2026-05-01
चाचणी तारीख: 2026-05-22 00:30
ibm-granite/granite-4.1-8b::none
सारांश
Granite 4.1 8B AI BENCHY वर 4.1 स्कोर करते आणि #153 वर आहे. याची reliability 10.0, pass rate 10.0%, एकूण खर्च $0.003, आणि सरासरी response time 723ms आहे.
Granite 4.1 8B खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #3 आहे; तर सूचनांचे पालन हा सर्वात कमकुवत भाग आहे, rank #13. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.
4.1
सुसंगतता
10.0
10.0
$0.003
एकूण आउटपुट टोकन्स
2,742
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.050 / 1M
आउटपुट किंमत
$0.100 / 1M
अस्थिर चाचण्या
0
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Generation showcase
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-06-04 14:07 नवीन चाचणी जोडली | 4.0 | 10.0 | $0.003 | तुलना करा | |
| 2026-05-22 00:30 सूट बदलला | 4.1 | 10.0 | $0.003 | सध्याची रन | |
| 2026-05-01 00:31 पहिला रन | 4.3 | 10.0 | $0.003 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:30 · सूट बदलला | 4.1 | 10.0 | 10.0 | 2/20 | 0 | 2,742 | 0 | $0.003 | 723ms |
| 2026-05-01 00:31 · पहिला रन | 4.3 | 10.0 | 10.0 | 2/18 | 0 | 2,712 | 0 | $0.003 | 767ms |
| फरक | -0.2 | 0.0 | 0.0 | 0 | 0 | +30 | 0 | +$0.001 | -44ms |
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
Granite 4.1 8BnonevsGrok 4.20noneGranite 4.1 8BnonevsQwen3.5-122B-A10BnoneGranite 4.1 8BnonevsDeepSeek V3.2noneGranite 4.1 8BnonevsGLM 5 TurbononeGranite 4.1 8BnonevsMiniMax M2.7mediumGranite 4.1 8BnonevsGemini 3.5 FlashhighGranite 4.1 8BnonevsGemini 3 Flash PreviewmediumGranite 4.1 8BnonevsNemotron 3 Ultra 550b A55bmediumमोफत उपलब्धGranite 4.1 8BnonevsGPT-5.5low
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 4.9 | 10.0 | |
| कोडिंग | 5.2 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 3.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| सूचनांचे पालन | 3.6 | 9.9 | |
| कोडी सोडवणे | 3.2 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |