#153 IBM: Granite 4.1 8B
none- लागत
- $0.001
- समय
- 3.2s
- टोकन
- 491 tok
IBM Granite
रिलीज़: 2026-05-01
परीक्षण किया गया: 2026-05-22 00:30
ibm-granite/granite-4.1-8b::none
8Bसघनमुक्त स्रोत सारांश
Granite 4.1 8B AI BENCHY पर 4.1 स्कोर करता है और #153 पर है। इसकी reliability 10.0, pass rate 10.0%, कुल लागत $0.003, और औसत response time 723ms है।
Granite 4.1 8B को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- 8B
- आर्किटेक्चर
- सघन
- उपलब्धता
- मुक्त स्रोत
- लाइसेंस
- Apache-2.0
4.1
संगति
10.0
10.0
$0.003
कुल आउटपुट टोकन
2,742
कुल इनपुट टोकन
0
इनपुट कीमत
$0.050 / 1M
आउटपुट कीमत
$0.100 / 1M
अस्थिर टेस्ट
0
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:51 दोबारा परीक्षण | 4.0 | 10.0 | $0.007 | तुलना करें | |
| 2026-07-16 23:04 नया टेस्ट जोड़ा गया | 4.0 | 10.0 | $0.007 | तुलना करें | |
| 2026-06-04 14:07 नया टेस्ट जोड़ा गया | 4.0 | 10.0 | $0.003 | तुलना करें | |
| 2026-05-22 00:30 सूट बदला गया | 4.1 | 10.0 | $0.003 | वर्तमान रन | |
| 2026-05-01 00:31 पहला रन | 4.3 | 10.0 | $0.003 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:30 · सूट बदला गया | 60/60 प्रयास | 4.1 | 10.0 | 10.0 | 2/20 | 0 | 2,742 | 0 | $0.003 | 723ms |
| 2026-08-14 02:51 · दोबारा परीक्षण | 66/66 प्रयास | 4.0 | 10.0 | 10.0 | 2/22 | 0 | 5,996 | 113,836 | $0.007 | 1.44s |
| अंतर | — | +0.1 | 0.0 | 0.0 | 0 | 0 | -3254 | -113836 | -$0.004 | -720ms |
बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Granite 4.1 8BnonevsLing 3.0 TinynoneGranite 4.1 8BnonevsNemotron 3.5 Lightningnoneनिःशुल्क उपलब्धGranite 4.1 8BnonevsGrok 4.20noneGranite 4.1 8BnonevsMercury 2.5noneGranite 4.1 8BnonevsGranite 4.2 8BnoneGranite 4.1 8BnonevsLing 3.0 TinyhighGranite 4.1 8BnonevsGLM 4.7 FlashmediumGranite 4.1 8BnonevsLing 3.0 TinylowGranite 4.1 8BnonevsLaguna S 2.1noneनिःशुल्क उपलब्धGranite 4.1 8BnonevsQwen3.5-9Bmedium
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 4.9 | 10.0 | |
| कोडिंग | 5.2 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 3.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| निर्देश पालन | 3.6 | 9.9 | |
| पहेली समाधान | 3.2 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |