AI BENCHY
Advertise here
#139

GPT-4o-mini

OpenAI रिलीज़: 2024-07-18 परीक्षण किया गया: 2026-05-21 23:41 openai/gpt-4o-mini::none
~8Bसघनबंद स्रोतअनुमानित

सारांश

GPT-4o-mini AI BENCHY पर 4.9 स्कोर करता है और #139 पर है। इसकी reliability 10.0, pass rate 25.0%, कुल लागत $0.006, और औसत response time 1.87s है।

GPT-4o-mini को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

अनुमानित
पैरामीटर
~8B
आर्किटेक्चर
सघन
उपलब्धता
बंद स्रोत
लाइसेंस
-

सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।

संगति

9.9

कुल आउटपुट टोकन

1,977

कुल इनपुट टोकन

0

इनपुट कीमत

$0.150 / 1M

आउटपुट कीमत

$0.600 / 1M

सही परीक्षण

गलत टेस्ट: 15

प्रति प्रयास पास दर: 25.0%

अस्थिर टेस्ट

0

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

1.87s

प्रतिक्रिया समय (अधिकतम): 7.58s

प्रतिक्रिया समय (कुल): 24.34s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#139 GPT-4o-mini

none
लागत
$0.001
समय
6.6s
टोकन
742 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-08-14 01:32 दोबारा परीक्षण 5.0 10.0 $0.010 तुलना करें
2026-07-16 21:13 नया टेस्ट जोड़ा गया 5.0 10.0 $0.010 तुलना करें
2026-06-04 13:04 नया टेस्ट जोड़ा गया 4.8 10.0 $0.006 तुलना करें
2026-05-21 23:41 सूट बदला गया 4.9 10.0 $0.006 वर्तमान रन
2026-04-11 01:19 पहला दर्ज रन 4.9 लागू नहीं $0.005 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-05-21 23:41 · सूट बदला गया60/60 प्रयास4.99.910.05/2001,9770$0.0061.87s
2026-06-04 13:04 · नया टेस्ट जोड़ा गया63/63 प्रयास4.89.910.05/2101,98231,518$0.0061.77s
अंतर+0.10.00.000-5-31518-$0.001+101ms

बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 63/63 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 4.8 10.0
कोडिंग 3.2 9.3
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.0 10.0
Samanya Buddhimatta 4.0 10.0
निर्देश पालन 6.3 10.0
पहेली समाधान 3.5 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल