#98 Owl Alpha
medium- खर्च
- $0.000
- वेळ
- 0.2s
- टोकन्स
- 0 tok
सारांश
Owl Alpha AI BENCHY वर 5.6 स्कोर करते आणि #98 वर आहे. याची reliability 10.0, pass rate 37.0%, एकूण खर्च $0.000, आणि सरासरी response time 11.04s आहे.
Owl Alpha खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर सूचनांचे पालन हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.
संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.
ओळख नोंद
Owl Alpha हे Meituan: LongCat 2.0 चे स्टेल्थ आवृत्ती होते.
संशोधन दिनांक: 2026-08-12
5.6
सुसंगतता
9.2
10.0
$0.000
एकूण आउटपुट टोकन्स
1,596
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.000 / 1M
आउटपुट किंमत
$0.000 / 1M
अस्थिर चाचण्या
2
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-06-04 14:30 नवीन चाचणी जोडली | 5.6 | 10.0 | $0.000 | तुलना करा | |
| 2026-05-22 00:43 सूट बदलला | 5.8 | 9.9 | $0.000 | तुलना करा | |
| 2026-04-30 17:29 पहिला रन | 5.6 | 10.0 | $0.000 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-30 17:29 · पहिला रन | 54/54 प्रयत्न | 5.6 | 9.2 | 10.0 | 6/18 | 2 | 1,596 | 0 | $0.000 | 11.04s |
| 2026-06-04 14:30 · नवीन चाचणी जोडली | 63/63 प्रयत्न | 5.6 | 9.2 | 10.0 | 8/21 | 1 | 2,974 | 43,478 | $0.000 | 11.95s |
| फरक | — | 0.0 | 0.0 | 0.0 | -2 | +1 | -1378 | -43478 | $0.000 | -911ms |
बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 4.8 | 10.0 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 4.3 | 10.0 | |
| सूचनांचे पालन | 4.4 | 6.9 | |
| कोडी सोडवणे | 3.4 | 7.2 | |
| टूल कॉलिंग | 10.0 | 10.0 |