AI BENCHY
Advertise here
#93

GPT-5.4 Mini

OpenAI रिलीज़: 2026-03-17 परीक्षण किया गया: 2026-04-11 01:44 openai/gpt-5.4-mini::none
(medium) (none)

सारांश

GPT-5.4 Mini AI BENCHY पर 5.1 स्कोर करता है और #93 पर है। इसकी reliability लागू नहीं, pass rate 35.2%, कुल लागत $0.032, और औसत response time 1.17s है।

GPT-5.4 Mini को अलग क्या बनाता है: यह कोडिंग में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि एंटी-एआई ट्रिक्स इसकी सबसे कमजोर जगह है, जहाँ यह #18 पर है। इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।

संगति

8.6

विश्वसनीयता

लागू नहीं

कुल आउटपुट टोकन

2,418

कुल इनपुट टोकन

0

इनपुट कीमत

$0.750 / 1M

आउटपुट कीमत

$4.500 / 1M

सही परीक्षण

गलत टेस्ट: 13

प्रति प्रयास पास दर: 35.2%

अस्थिर टेस्ट

3

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

1.17s

प्रतिक्रिया समय (अधिकतम): 2.52s

प्रतिक्रिया समय (कुल): 21.01s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#93 GPT-5.4 Mini

none
लागत
$0.010
समय
11.7s
टोकन
2,151 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-07-16 22:33 नया टेस्ट जोड़ा गया 5.9 10.0 $0.095 तुलना करें
2026-06-04 13:45 नया टेस्ट जोड़ा गया 4.9 10.0 $0.038 तुलना करें
2026-05-22 00:18 सूट बदला गया 4.9 10.0 $0.035 तुलना करें
2026-04-11 01:44 पहला दर्ज रन 5.1 लागू नहीं $0.032 वर्तमान रन

रन तुलना

रनस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-04-11 01:44 · पहला दर्ज रन5.18.6लागू नहीं5/1832,4180$0.0321.17s
2026-05-22 00:18 · सूट बदला गया4.98.810.05/2032,4960$0.0351.16s
अंतर+0.2-0.200-780-$0.004+9ms

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 3.1 8.1
कोडिंग 10.0 10.0
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.5 4.4
Samanya Buddhimatta 4.8 10.0
निर्देश पालन 6.3 10.0
पहेली समाधान 5.4 10.0
टूल कॉलिंग 3.0 10.0

तुलना किए गए मॉडल