#135 IBM: Granite 4.1 8B
none- Cost
- $0.001
- Time
- 3.2s
- Tokens
- 491 tok
IBM Granite
रिलीज़: 2026-05-01
परीक्षण किया गया: 2026-05-01 00:31
ibm-granite/granite-4.1-8b::none
सारांश
Granite 4.1 8B AI BENCHY पर 4.3 स्कोर करता है और #135 पर है। इसकी reliability 10.0, pass rate 11.1%, कुल लागत $0.003, और औसत response time 767ms है।
Granite 4.1 8B को अलग क्या बनाता है: यह कोडिंग में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि डेटा पार्सिंग और निष्कर्षण इसकी सबसे कमजोर जगह है, जहाँ यह #15 पर है। इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
4.3
संगति
10.0
10.0
$0.003
कुल आउटपुट टोकन
2,712
कुल इनपुट टोकन
0
इनपुट कीमत
$0.050 / 1M
आउटपुट कीमत
$0.100 / 1M
अस्थिर टेस्ट
0
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Generation showcase
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-06-04 14:07 नया टेस्ट जोड़ा गया | 4.0 | 10.0 | $0.003 | तुलना करें | |
| 2026-05-22 00:30 सूट बदला गया | 4.1 | 10.0 | $0.003 | तुलना करें | |
| 2026-05-01 00:31 पहला रन | 4.3 | 10.0 | $0.003 | वर्तमान रन |
रन तुलना
| रन | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-01 00:31 · पहला रन | 4.3 | 10.0 | 10.0 | 2/18 | 0 | 2,712 | 0 | $0.003 | 767ms |
| 2026-06-04 14:07 · नया टेस्ट जोड़ा गया | 4.0 | 10.0 | 10.0 | 2/21 | 0 | 2,911 | 46,285 | $0.003 | 728ms |
| अंतर | +0.2 | 0.0 | 0.0 | 0 | 0 | -199 | -46285 | -$0.001 | +39ms |
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Granite 4.1 8BnonevsGrok 4.20noneGranite 4.1 8BnonevsQwen3.5-122B-A10BnoneGranite 4.1 8BnonevsDeepSeek V3.2noneGranite 4.1 8BnonevsGLM 5 TurbononeGranite 4.1 8BnonevsMiniMax M2.7mediumGranite 4.1 8BnonevsGemini 3.5 FlashhighGranite 4.1 8BnonevsGemini 3 Flash PreviewmediumGranite 4.1 8BnonevsNemotron 3 Ultra 550b A55bmediumनिःशुल्क उपलब्धGranite 4.1 8BnonevsGPT-5.5low
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 4.9 | 10.0 | |
| कोडिंग | 6.9 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 3.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| निर्देश पालन | 3.6 | 9.9 | |
| पहेली समाधान | 3.7 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 |