#49 GPT-5.4 Mini
medium- Cost
- $0.056
- Time
- 95.5s
- Tokens
- 12,464 tok
सारांश
GPT-5.4 Mini AI BENCHY वर 7.3 स्कोर करते आणि #49 वर आहे. याची reliability लागू नाही, pass rate 70.4%, एकूण खर्च $0.299, आणि सरासरी response time 15.22s आहे.
GPT-5.4 Mini खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर सूचनांचे पालन हा सर्वात कमकुवत भाग आहे, rank #15.
7.3
सुसंगतता
7.4
लागू नाही
$0.299
एकूण आउटपुट टोकन्स
61,698
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.750 / 1M
आउटपुट किंमत
$4.500 / 1M
अस्थिर चाचण्या
6
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Generation showcase
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-06-04 13:47 नवीन चाचणी जोडली | 7.5 | 10.0 | $0.526 | तुलना करा | |
| 2026-05-22 00:21 सूट बदलला | 7.1 | 10.0 | $0.487 | तुलना करा | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 7.3 | लागू नाही | $0.299 | सध्याची रन |
रन तुलना
| रन | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहिली नोंदलेली रन | 7.3 | 7.4 | लागू नाही | 9/18 | 6 | 61,698 | 0 | $0.299 | 15.22s |
| 2026-05-22 00:21 · सूट बदलला | 7.1 | 7.6 | 10.0 | 10/20 | 6 | 102,892 | 0 | $0.487 | 22.14s |
| फरक | +0.2 | -0.2 | -1 | 0 | -41194 | 0 | -$0.189 | -6920ms |
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 8.6 | 7.9 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 4.1 | 4.4 | |
| Samanya Buddhimatta | 4.5 | 10.0 | |
| सूचनांचे पालन | 7.4 | 6.5 | |
| कोडी सोडवणे | 6.8 | 7.9 | |
| टूल कॉलिंग | 4.7 | 1.6 |