#38 Claude Opus 4.8
low- खर्च
- $0.031
- वेळ
- 14.1s
- टोकन्स
- 1,345 tok
सारांश
Claude Opus 4.8 AI BENCHY वर 7.8 स्कोर करते आणि #38 वर आहे. याची reliability 10.0, pass rate 80.3%, एकूण खर्च $2.077, आणि सरासरी response time 12.74s आहे.
Claude Opus 4.8 खास का आहे: हे कोडी सोडवणे मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18.
संशोधन दिनांक: 2026-08-12
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
7.8
सुसंगतता
8.9
10.0
$2.077
एकूण आउटपुट टोकन्स
51,758
एकूण इनपुट टोकन्स
156,525
इनपुट किंमत
$5.000 / 1M
आउटपुट किंमत
$25.000 / 1M
अस्थिर चाचण्या
3
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:09 पुन्हा चाचणी | 7.8 | 10.0 | $2.089 | तुलना करा | |
| 2026-07-16 22:30 नवीन चाचणी जोडली | 7.8 | 10.0 | $2.077 | सध्याची रन | |
| 2026-06-30 22:08 पहिला रन | 7.7 | 10.0 | $1.270 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-07-16 22:30 · नवीन चाचणी जोडली | 66/66 प्रयत्न | 7.8 | 8.9 | 10.0 | 16/22 | 3 | 51,758 | 156,525 | $2.077 | 12.74s |
| 2026-08-14 02:09 · पुन्हा चाचणी | 66/66 प्रयत्न | 7.8 | 8.9 | 10.0 | 16/22 | 3 | 52,237 | 156,522 | $2.089 | 12.88s |
| फरक | — | 0.0 | 0.0 | 0.0 | 0 | 0 | -479 | +3 | -$0.012 | -138ms |
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत |
|---|---|---|
| 2026-06-30 22:09 | $5.000 / 1M | $25.000 / 1M |
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 10.0 | 10.0 | |
| कोडिंग | 6.6 | 4.6 | |
| संयुक्त | 9.9 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 6.3 | 5.8 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| सूचनांचे पालन | 9.8 | 10.0 | |
| कोडी सोडवणे | 10.0 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |