#97 GPT-4o-mini
none- लागत
- $0.001
- समय
- 6.6s
- टोकन
- 742 tok
OpenAI
रिलीज़: 2024-07-18
परीक्षण किया गया: 2026-04-11 01:19
openai/gpt-4o-mini::none
सारांश
GPT-4o-mini AI BENCHY पर 4.9 स्कोर करता है और #97 पर है। इसकी reliability लागू नहीं, pass rate 22.2%, कुल लागत $0.005, और औसत response time 2.00s है।
4.9
संगति
9.9
लागू नहीं
$0.005
कुल आउटपुट टोकन
1,947
कुल इनपुट टोकन
0
इनपुट कीमत
$0.150 / 1M
आउटपुट कीमत
$0.600 / 1M
अस्थिर टेस्ट
0
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
जनरेशन शोकेस
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-06-04 13:04 नया टेस्ट जोड़ा गया | 4.8 | 10.0 | $0.006 | तुलना करें | |
| 2026-05-21 23:41 सूट बदला गया | 4.9 | 10.0 | $0.006 | तुलना करें | |
| 2026-04-11 01:19 पहला दर्ज रन | 4.9 | लागू नहीं | $0.005 | वर्तमान रन |
रन तुलना
| रन | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:19 · पहला दर्ज रन | 4.9 | 9.9 | लागू नहीं | 4/18 | 0 | 1,947 | 0 | $0.005 | 2.00s |
| 2026-05-21 23:41 · सूट बदला गया | 4.9 | 9.9 | 10.0 | 5/20 | 0 | 1,977 | 0 | $0.006 | 1.87s |
| अंतर | 0.0 | 0.0 | -1 | 0 | -30 | 0 | -$0.001 | +127ms |
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
GPT-4o-mininonevsDeepSeek V4 FlashnoneGPT-4o-mininonevsClaude Sonnet 5noneGPT-4o-mininonevsKimi K2.5noneGPT-4o-mininonevsMiMo-V2.5-PrononeGPT-4o-mininonevsGemini 3.5 FlashhighGPT-4o-mininonevsGemini 3 Flash PreviewmediumGPT-4o-mininonevsNemotron 3 Ultra 550b A55bmediumनिःशुल्क उपलब्धGPT-4o-mininonevsGPT-5.5low
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 4.8 | 10.0 | |
| कोडिंग | 3.0 | 8.7 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| निर्देश पालन | 4.8 | 10.0 | |
| पहेली समाधान | 3.7 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 |