#153 IBM: Granite 4.1 8B
none- खर्च
- $0.001
- वेळ
- 3.2s
- टोकन्स
- 491 tok
IBM Granite
प्रकाशन: 2026-05-01
चाचणी तारीख: 2026-05-22 00:30
ibm-granite/granite-4.1-8b::none
8Bघनमुक्त स्रोत सारांश
Granite 4.1 8B AI BENCHY वर 4.1 स्कोर करते आणि #153 वर आहे. याची reliability 10.0, pass rate 10.0%, एकूण खर्च $0.003, आणि सरासरी response time 723ms आहे.
Granite 4.1 8B खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- 8B
- आर्किटेक्चर
- घन
- उपलब्धता
- मुक्त स्रोत
- परवाना
- Apache-2.0
4.1
सुसंगतता
10.0
10.0
$0.003
एकूण आउटपुट टोकन्स
2,742
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.050 / 1M
आउटपुट किंमत
$0.100 / 1M
अस्थिर चाचण्या
0
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:51 पुन्हा चाचणी | 4.0 | 10.0 | $0.007 | तुलना करा | |
| 2026-07-16 23:04 नवीन चाचणी जोडली | 4.0 | 10.0 | $0.007 | तुलना करा | |
| 2026-06-04 14:07 नवीन चाचणी जोडली | 4.0 | 10.0 | $0.003 | तुलना करा | |
| 2026-05-22 00:30 सूट बदलला | 4.1 | 10.0 | $0.003 | सध्याची रन | |
| 2026-05-01 00:31 पहिला रन | 4.3 | 10.0 | $0.003 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:30 · सूट बदलला | 60/60 प्रयत्न | 4.1 | 10.0 | 10.0 | 2/20 | 0 | 2,742 | 0 | $0.003 | 723ms |
| 2026-08-14 02:51 · पुन्हा चाचणी | 66/66 प्रयत्न | 4.0 | 10.0 | 10.0 | 2/22 | 0 | 5,996 | 113,836 | $0.007 | 1.44s |
| फरक | — | +0.1 | 0.0 | 0.0 | 0 | 0 | -3254 | -113836 | -$0.004 | -720ms |
बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
Granite 4.1 8BnonevsLing 3.0 TinynoneGranite 4.1 8BnonevsNemotron 3.5 Lightningnoneमोफत उपलब्धGranite 4.1 8BnonevsGrok 4.20noneGranite 4.1 8BnonevsMercury 2.5noneGranite 4.1 8BnonevsGranite 4.2 8BnoneGranite 4.1 8BnonevsLing 3.0 TinyhighGranite 4.1 8BnonevsGLM 4.7 FlashmediumGranite 4.1 8BnonevsLing 3.0 TinylowGranite 4.1 8BnonevsLaguna S 2.1noneमोफत उपलब्धGranite 4.1 8BnonevsQwen3.5-9Bmedium
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 4.9 | 10.0 | |
| कोडिंग | 5.2 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 3.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| सूचनांचे पालन | 3.6 | 9.9 | |
| कोडी सोडवणे | 3.2 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |