#112 gpt-oss-120b
medium- लागत
- $0.001
- समय
- 26.7s
- टोकन
- 555 tok
सारांश
gpt-oss-120b AI BENCHY पर 5.6 स्कोर करता है और #112 पर है। इसकी reliability 10.0, pass rate 46.7%, कुल लागत $0.012, और औसत response time 20.89s है।
gpt-oss-120b को अलग क्या बनाता है: यह निर्देश पालन में सबसे अलग दिखता है, जहाँ इसकी रैंक #4 है; जबकि कोडिंग इसकी सबसे कमजोर जगह है, जहाँ यह #18 पर है।
शोध की तारीख: 2026-08-12
5.6
संगति
7.5
10.0
$0.012
कुल आउटपुट टोकन
63,919
कुल इनपुट टोकन
0
इनपुट कीमत
$0.000 / 1M
आउटपुट कीमत
$0.000 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
6
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:08 दोबारा परीक्षण | 6.1 | 10.0 | $0.019 ↓ | तुलना करें | |
| 2026-07-16 22:24 नया टेस्ट जोड़ा गया | 6.1 | 10.0 | $0.019 ↓ | तुलना करें | |
| 2026-06-04 13:44 नया टेस्ट जोड़ा गया | 6.1 | 10.0 | $0.013 ↓ | तुलना करें | |
| 2026-05-22 00:18 सूट बदला गया | 5.6 | 10.0 | $0.012 | वर्तमान रन | |
| 2026-04-21 12:42 पहला दर्ज रन | 5.8 | लागू नहीं | $0.011 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:18 · सूट बदला गया | 60/60 प्रयास | 5.6 | 7.5 | 10.0 | 7/20 | 6 | 63,919 | 0 | $0.012 | 20.89s |
| 2026-08-14 02:08 · दोबारा परीक्षण | 66/66 प्रयास | 6.1 | 8.0 | 10.0 | 9/22 | 5 | 98,282 | 108,767 | $0.019 | 20.81s |
| अंतर | — | -0.5 | -0.5 | 0.0 | -2 | +1 | -34363 | -108767 | -$0.007 | +83ms |
बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 6.7 | 9.9 | |
| कोडिंग | 3.9 | 5.6 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 6.4 | 5.9 | |
| डोमेन-विशिष्ट | 2.9 | 4.4 | |
| Samanya Buddhimatta | 4.3 | 10.0 | |
| निर्देश पालन | 9.9 | 10.0 | |
| पहेली समाधान | 3.2 | 4.7 | |
| टूल कॉलिंग | 9.8 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |