AI BENCHY
Advertise here
#285

gpt-oss-120b

OpenAI रिलीज़: 2025-08-05 परीक्षण किया गया: 2026-05-08 15:31 openai/gpt-oss-120b::none
117B कुल (5.1B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

gpt-oss-120b AI BENCHY पर 3.7 स्कोर करता है और #285 पर है। इसकी reliability 10.0, pass rate 33.3%, कुल लागत $0.010, और औसत response time 21.61s है।

gpt-oss-120b को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

घोषित
पैरामीटर
117B कुल (5.1B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
लाइसेंस
Apache-2.0

संगति

7.8

कुल लागत (वर्तमान कीमत)

$0.010 ↓ -9.9%

परीक्षण के समय: $0.011

कुल आउटपुट टोकन

51,664

कुल इनपुट टोकन

9,081

इनपुट कीमत

$0.030 / 1M

आउटपुट कीमत

$0.170 / 1M

सही परीक्षण

गलत टेस्ट: 13

प्रति प्रयास पास दर: 33.3%

बेंचमार्क कवरेज: 57/66 प्रयास

अस्थिर टेस्ट

2

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

21.61s

प्रतिक्रिया समय (अधिकतम): 113.71s

प्रतिक्रिया समय (कुल): 345.79s

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-05-08 15:31 सूट बदला गया 3.7 10.0 $0.010 वर्तमान रन
2026-04-21 12:42 पहला दर्ज रन 5.2 लागू नहीं $0.009 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-05-08 15:31 · वर्तमान रन57/66 प्रयास3.77.810.06/19251,6649,081$0.01021.61s
2026-04-21 12:42 · पहला दर्ज रन54/54 प्रयास5.27.9लागू नहीं4/18544,6520$0.00911.96s
अंतर-1.5-0.1+2-3+7012+9081+$0.001+9656ms

बेंचमार्क कवरेज अलग है: 57/57 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

कीमत का इतिहास

OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।

तारीख इनपुट कीमत आउटपुट कीमत
2026-06-04 15:40 $0.039 / 1M $0.180 / 1M
2026-06-29 01:00 $0.030 / 1M $0.150 / 1M
2026-07-09 20:59 $0.036 / 1M $0.180 / 1M
2026-07-16 15:36 $0.037 / 1M $0.170 / 1M
2026-08-12 11:59 $0.030 / 1M $0.170 / 1M

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 6.5 10.0
कोडिंग 1.5 4.0
संयुक्त 1.5 5.0
डेटा पार्सिंग और निष्कर्षण 6.5 10.0
डोमेन-विशिष्ट 3.0 10.0
Samanya Buddhimatta 4.8 10.0
निर्देश पालन 9.8 10.0
पहेली समाधान 6.0 7.2
टूल कॉलिंग 3.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल