#73 gpt-oss-120b
medium- खर्च
- $0.001
- वेळ
- 26.7s
- टोकन्स
- 555 tok
सारांश
gpt-oss-120b AI BENCHY वर 5.8 स्कोर करते आणि #73 वर आहे. याची reliability लागू नाही, pass rate 51.9%, एकूण खर्च $0.011, आणि सरासरी response time 16.08s आहे.
gpt-oss-120b खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.
संशोधन दिनांक: 2026-08-12
5.8
सुसंगतता
7.2
लागू नाही
$0.011
एकूण आउटपुट टोकन्स
50,372
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.000 / 1M
आउटपुट किंमत
$0.000 / 1M
अस्थिर चाचण्या
6
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:08 पुन्हा चाचणी | 6.1 | 10.0 | $0.019 ↓ | तुलना करा | |
| 2026-07-16 22:24 नवीन चाचणी जोडली | 6.1 | 10.0 | $0.019 ↓ | तुलना करा | |
| 2026-06-04 13:44 नवीन चाचणी जोडली | 6.1 | 10.0 | $0.013 ↓ | तुलना करा | |
| 2026-05-22 00:18 सूट बदलला | 5.6 | 10.0 | $0.012 | तुलना करा | |
| 2026-04-21 12:42 पहिली नोंदलेली रन | 5.8 | लागू नाही | $0.011 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-21 12:42 · पहिली नोंदलेली रन | 54/54 प्रयत्न | 5.8 | 7.2 | लागू नाही | 7/18 | 6 | 50,372 | 0 | $0.011 | 16.08s |
| 2026-05-22 00:18 · सूट बदलला | 60/60 प्रयत्न | 5.6 | 7.5 | 10.0 | 7/20 | 6 | 63,919 | 0 | $0.012 | 20.89s |
| फरक | — | +0.3 | -0.3 | 0 | 0 | -13547 | 0 | -$0.002 | -4808ms |
बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 6.7 | 9.9 | |
| कोडिंग | 4.3 | 1.1 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 6.4 | 5.9 | |
| डोमेन-विशिष्ट | 2.9 | 4.4 | |
| Samanya Buddhimatta | 4.3 | 10.0 | |
| सूचनांचे पालन | 9.9 | 10.0 | |
| कोडी सोडवणे | 3.2 | 4.7 | |
| टूल कॉलिंग | 9.8 | 10.0 |