#135 IBM: Granite 4.1 8B
none- खर्च
- $0.001
- वेळ
- 3.2s
- टोकन्स
- 491 tok
सारांश
Granite 4.1 8B AI BENCHY वर 4.3 स्कोर करते आणि #135 वर आहे. याची reliability 10.0, pass rate 11.1%, एकूण खर्च $0.003, आणि सरासरी response time 767ms आहे.
Granite 4.1 8B खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.
संशोधन दिनांक: 2026-08-12
4.3
सुसंगतता
10.0
10.0
$0.003
एकूण आउटपुट टोकन्स
2,712
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.050 / 1M
आउटपुट किंमत
$0.100 / 1M
अस्थिर चाचण्या
0
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:51 पुन्हा चाचणी | 4.0 | 10.0 | $0.007 | तुलना करा | |
| 2026-07-16 23:04 नवीन चाचणी जोडली | 4.0 | 10.0 | $0.007 | तुलना करा | |
| 2026-06-04 14:07 नवीन चाचणी जोडली | 4.0 | 10.0 | $0.003 | तुलना करा | |
| 2026-05-22 00:30 सूट बदलला | 4.1 | 10.0 | $0.003 | तुलना करा | |
| 2026-05-01 00:31 पहिला रन | 4.3 | 10.0 | $0.003 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-01 00:31 · पहिला रन | 54/54 प्रयत्न | 4.3 | 10.0 | 10.0 | 2/18 | 0 | 2,712 | 0 | $0.003 | 767ms |
| 2026-08-14 02:51 · पुन्हा चाचणी | 66/66 प्रयत्न | 4.0 | 10.0 | 10.0 | 2/22 | 0 | 5,996 | 113,836 | $0.007 | 1.44s |
| फरक | — | +0.3 | 0.0 | 0.0 | 0 | 0 | -3284 | -113836 | -$0.005 | -676ms |
बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 4.9 | 10.0 | |
| कोडिंग | 6.9 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 3.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| सूचनांचे पालन | 3.6 | 9.9 | |
| कोडी सोडवणे | 3.7 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 |