#97 GPT-4o-mini
none- लागत
- $0.001
- समय
- 6.6s
- टोकन
- 742 tok
OpenAI
रिलीज़: 2024-07-18
परीक्षण किया गया: 2026-04-11 01:19
openai/gpt-4o-mini::none
~8Bसघनबंद स्रोतअनुमानित सारांश
GPT-4o-mini AI BENCHY पर 4.9 स्कोर करता है और #97 पर है। इसकी reliability लागू नहीं, pass rate 22.2%, कुल लागत $0.005, और औसत response time 2.00s है।
GPT-4o-mini को अलग क्या बनाता है: यह समान मॉडलों की तुलना में काफ़ी तेज है।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- ~8B
- आर्किटेक्चर
- सघन
- उपलब्धता
- बंद स्रोत
- लाइसेंस
- -
सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।
4.9
संगति
9.9
लागू नहीं
$0.005
कुल आउटपुट टोकन
1,947
कुल इनपुट टोकन
0
इनपुट कीमत
$0.150 / 1M
आउटपुट कीमत
$0.600 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
0
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 01:32 दोबारा परीक्षण | 5.0 | 10.0 | $0.010 | तुलना करें | |
| 2026-07-16 21:13 नया टेस्ट जोड़ा गया | 5.0 | 10.0 | $0.010 | तुलना करें | |
| 2026-06-04 13:04 नया टेस्ट जोड़ा गया | 4.8 | 10.0 | $0.006 | तुलना करें | |
| 2026-05-21 23:41 सूट बदला गया | 4.9 | 10.0 | $0.006 | तुलना करें | |
| 2026-04-11 01:19 पहला दर्ज रन | 4.9 | लागू नहीं | $0.005 | वर्तमान रन |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:19 · पहला दर्ज रन | 54/54 प्रयास | 4.9 | 9.9 | लागू नहीं | 4/18 | 0 | 1,947 | 0 | $0.005 | 2.00s |
| 2026-08-14 01:32 · दोबारा परीक्षण | 66/66 प्रयास | 5.0 | 9.9 | 10.0 | 5/22 | 0 | 2,913 | 53,145 | $0.010 | 1.92s |
| अंतर | — | -0.1 | 0.0 | -1 | 0 | -966 | -53145 | -$0.005 | +80ms |
बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
GPT-4o-mininonevsDots 3 Note Previewnoneनिःशुल्क उपलब्धGPT-4o-mininonevsKAT Coder AIR V2.5lowGPT-4o-mininonevsMiniMax M2.7mediumGPT-4o-mininonevsInkling Smallnoneनिःशुल्क उपलब्धGPT-4o-mininonevsMercury 2.5 PreviewlowGPT-4o-mininonevsQwen3 Coder NextnoneGPT-4o-mininonevsLaguna S 2.1mediumनिःशुल्क उपलब्धGPT-4o-mininonevsLaguna S 2.1highनिःशुल्क उपलब्धGPT-4o-mininonevsApodex 1.1 Mininoneनिःशुल्क उपलब्धGPT-4o-mininonevsLing 2.6 1tnone
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 4.8 | 10.0 | |
| कोडिंग | 3.0 | 8.7 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| निर्देश पालन | 4.8 | 10.0 | |
| पहेली समाधान | 3.7 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 |