#112 gpt-oss-120b
medium- खर्च
- $0.001
- वेळ
- 26.7s
- टोकन्स
- 555 tok
सारांश
gpt-oss-120b AI BENCHY वर 5.6 स्कोर करते आणि #112 वर आहे. याची reliability 10.0, pass rate 46.7%, एकूण खर्च $0.012, आणि सरासरी response time 20.89s आहे.
gpt-oss-120b खास का आहे: हे संयुक्त मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.
संशोधन दिनांक: 2026-08-12
5.6
सुसंगतता
7.5
10.0
$0.012
एकूण आउटपुट टोकन्स
63,919
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.000 / 1M
आउटपुट किंमत
$0.000 / 1M
अस्थिर चाचण्या
6
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:08 पुन्हा चाचणी | 6.1 | 10.0 | $0.019 ↓ | तुलना करा | |
| 2026-07-16 22:24 नवीन चाचणी जोडली | 6.1 | 10.0 | $0.019 ↓ | तुलना करा | |
| 2026-06-04 13:44 नवीन चाचणी जोडली | 6.1 | 10.0 | $0.013 ↓ | तुलना करा | |
| 2026-05-22 00:18 सूट बदलला | 5.6 | 10.0 | $0.012 | सध्याची रन | |
| 2026-04-21 12:42 पहिली नोंदलेली रन | 5.8 | लागू नाही | $0.011 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:18 · सूट बदलला | 60/60 प्रयत्न | 5.6 | 7.5 | 10.0 | 7/20 | 6 | 63,919 | 0 | $0.012 | 20.89s |
| 2026-07-16 22:24 · नवीन चाचणी जोडली | 66/66 प्रयत्न | 6.1 | 8.0 | 10.0 | 9/22 | 5 | 97,816 | 108,747 | $0.019 | 21.91s |
| फरक | — | -0.5 | -0.5 | 0.0 | -2 | +1 | -33897 | -108747 | -$0.007 | -1025ms |
बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 6.7 | 9.9 | |
| कोडिंग | 3.9 | 5.6 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 6.4 | 5.9 | |
| डोमेन-विशिष्ट | 2.9 | 4.4 | |
| Samanya Buddhimatta | 4.3 | 10.0 | |
| सूचनांचे पालन | 9.9 | 10.0 | |
| कोडी सोडवणे | 3.2 | 4.7 | |
| टूल कॉलिंग | 9.8 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |