#49 GPT-5.4 Mini
medium- लागत
- $0.056
- समय
- 95.5s
- टोकन
- 12,464 tok
OpenAI
रिलीज़: 2026-03-17
परीक्षण किया गया: 2026-04-11 01:44
openai/gpt-5.4-mini::medium
~400B कुल (~17B सक्रिय)MoEबंद स्रोतअनुमानित
(medium)
(none)
सारांश
GPT-5.4 Mini AI BENCHY पर 7.3 स्कोर करता है और #49 पर है। इसकी reliability लागू नहीं, pass rate 70.4%, कुल लागत $0.299, और औसत response time 15.22s है।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- ~400B कुल (~17B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- बंद स्रोत
- लाइसेंस
- -
सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।
7.3
संगति
7.4
लागू नहीं
$0.299
कुल आउटपुट टोकन
61,698
कुल इनपुट टोकन
0
इनपुट कीमत
$0.750 / 1M
आउटपुट कीमत
$4.500 / 1M
अस्थिर टेस्ट
6
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:19 दोबारा परीक्षण | 7.5 | 10.0 | $0.786 | तुलना करें | |
| 2026-07-16 22:38 नया टेस्ट जोड़ा गया | 7.5 | 10.0 | $0.756 | तुलना करें | |
| 2026-06-04 13:47 नया टेस्ट जोड़ा गया | 7.5 | 10.0 | $0.526 | तुलना करें | |
| 2026-05-22 00:21 सूट बदला गया | 7.1 | 10.0 | $0.487 | तुलना करें | |
| 2026-04-11 01:44 पहला दर्ज रन | 7.3 | लागू नहीं | $0.299 | वर्तमान रन |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहला दर्ज रन | 54/54 प्रयास | 7.3 | 7.4 | लागू नहीं | 9/18 | 6 | 61,698 | 0 | $0.299 | 15.22s |
| 2026-06-04 13:47 · नया टेस्ट जोड़ा गया | 63/63 प्रयास | 7.5 | 8.0 | 10.0 | 12/21 | 5 | 111,118 | 34,116 | $0.526 | 22.34s |
| अंतर | — | -0.2 | -0.6 | -3 | +1 | -49420 | -34116 | -$0.228 | -7126ms |
बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 63/63 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
GPT-5.4 MinimediumvsMercury 2.5 PreviewmediumGPT-5.4 MinimediumvsGrok Build 0.1mediumGPT-5.4 MinimediumvsQwen3.5-27BmediumGPT-5.4 MinimediumvsGemini 3.8 FlashlowGPT-5.4 MinimediumvsQwen3.5 Plus 2026-02-15mediumGPT-5.4 MinimediumvsGemini 3.1 Flash Lite PreviewmediumGPT-5.4 MinimediumvsGPT 5.3 ChatnoneGPT-5.4 MinimediumvsQwen3.7 MaxnoneGPT-5.4 MinimediumvsMiniMax M3mediumGPT-5.4 MinimediumvsKimi K2.7 Codemedium
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 8.6 | 7.9 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 4.1 | 4.4 | |
| Samanya Buddhimatta | 4.5 | 10.0 | |
| निर्देश पालन | 7.4 | 6.5 | |
| पहेली समाधान | 6.8 | 7.9 | |
| टूल कॉलिंग | 4.7 | 1.6 |