#153 IBM: Granite 4.1 8B
none- Cost
- $0.001
- Time
- 3.2s
- Tokens
- 491 tok
IBM Granite
रिलीज़: 2026-05-01
परीक्षण किया गया: 2026-05-22 00:30
ibm-granite/granite-4.1-8b::none
सारांश
Granite 4.1 8B AI BENCHY पर 4.1 स्कोर करता है और #153 पर है। इसकी reliability 10.0, pass rate 10.0%, कुल लागत $0.003, और औसत response time 723ms है।
Granite 4.1 8B को अलग क्या बनाता है: यह कोडिंग में सबसे अलग दिखता है, जहाँ इसकी रैंक #3 है; जबकि निर्देश पालन इसकी सबसे कमजोर जगह है, जहाँ यह #13 पर है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
4.1
संगति
10.0
10.0
$0.003
कुल आउटपुट टोकन
2,742
कुल इनपुट टोकन
0
इनपुट कीमत
$0.050 / 1M
आउटपुट कीमत
$0.100 / 1M
अस्थिर टेस्ट
0
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Generation showcase
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-06-04 14:07 नया टेस्ट जोड़ा गया | 4.0 | 10.0 | $0.003 | तुलना करें | |
| 2026-05-22 00:30 सूट बदला गया | 4.1 | 10.0 | $0.003 | वर्तमान रन | |
| 2026-05-01 00:31 पहला रन | 4.3 | 10.0 | $0.003 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:30 · सूट बदला गया | 4.1 | 10.0 | 10.0 | 2/20 | 0 | 2,742 | 0 | $0.003 | 723ms |
| 2026-06-04 14:07 · नया टेस्ट जोड़ा गया | 4.0 | 10.0 | 10.0 | 2/21 | 0 | 2,911 | 46,285 | $0.003 | 728ms |
| अंतर | +0.1 | 0.0 | 0.0 | 0 | 0 | -169 | -46285 | -$0.001 | -5ms |
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Granite 4.1 8BnonevsGrok 4.20noneGranite 4.1 8BnonevsQwen3.5-122B-A10BnoneGranite 4.1 8BnonevsDeepSeek V3.2noneGranite 4.1 8BnonevsGLM 5 TurbononeGranite 4.1 8BnonevsMiniMax M2.7mediumGranite 4.1 8BnonevsGemini 3.5 FlashhighGranite 4.1 8BnonevsGemini 3 Flash PreviewmediumGranite 4.1 8BnonevsNemotron 3 Ultra 550b A55bmediumनिःशुल्क उपलब्धGranite 4.1 8BnonevsGPT-5.5low
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 4.9 | 10.0 | |
| कोडिंग | 5.2 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 3.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| निर्देश पालन | 3.6 | 9.9 | |
| पहेली समाधान | 3.2 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |