AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#3

Claude Opus 4.7

Anthropic प्रकाशन: 2026-04-16 चाचणी तारीख: 2026-04-16 15:59 anthropic/claude-opus-4.7::medium
~5T एकूण (~500B सक्रिय)MoEबंद स्रोतअंदाजित
(medium) (none)

सारांश

Claude Opus 4.7 AI BENCHY वर 9.2 स्कोर करते आणि #3 वर आहे. याची reliability लागू नाही, pass rate 88.9%, एकूण खर्च $0.447, आणि सरासरी response time 3.53s आहे.

Claude Opus 4.7 खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #2 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #11. हे एकूणात सर्वाधिक rank असलेल्या मॉडेल्सपैकी एक आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~5T एकूण (~500B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

10.0

विश्वसनीयता

लागू नाही

एकूण आउटपुट टोकन्स

6,716

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$5.000 / 1M

आउटपुट किंमत

$25.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 2

प्रति प्रयत्न पास दर: 88.9%

अस्थिर चाचण्या

0

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

3.53s

प्रतिसाद वेळ (कमाल): 21.45s

प्रतिसाद वेळ (एकूण): 60.03s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#3 Claude Opus 4.7

medium
खर्च
$0.059
वेळ
26.8s
टोकन्स
2,475 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:08 पुन्हा चाचणी 8.7 10.0 $1.476 तुलना करा
2026-07-16 22:28 नवीन चाचणी जोडली 8.7 10.0 $1.477 तुलना करा
2026-06-04 13:44 नवीन चाचणी जोडली 8.7 10.0 $0.679 तुलना करा
2026-05-22 00:18 पुन्हा चाचणी 8.9 10.0 $0.625 तुलना करा
2026-04-16 15:59 पहिली नोंदलेली रन 9.2 लागू नाही $0.447 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-04-16 15:59 · पहिली नोंदलेली रन54/54 प्रयत्न9.210.0लागू नाही16/1806,7160$0.4473.53s
2026-06-04 13:44 · नवीन चाचणी जोडली63/63 प्रयत्न8.79.610.017/21114,05665,406$0.6794.73s
फरक+0.6+0.4-1-1-7340-65406-$0.233-1194ms

बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 8.3 10.0
कोडिंग 10.0 10.0
संयुक्त 10.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 7.7 10.0
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 10.0 10.0
कोडी सोडवणे 10.0 10.0
टूल कॉलिंग 10.0 10.0

तुलना केलेली मॉडेल्स