AI BENCHY
Advertise here
#4

Claude Opus 4.7

Anthropic प्रकाशन: 2026-04-16 चाचणी तारीख: 2026-04-16 15:59 anthropic/claude-opus-4.7::none
~5T एकूण (~500B सक्रिय)MoEबंद स्रोतअंदाजित
(medium) (none)

सारांश

Claude Opus 4.7 AI BENCHY वर 9.2 स्कोर करते आणि #4 वर आहे. याची reliability लागू नाही, pass rate 88.9%, एकूण खर्च $0.505, आणि सरासरी response time 3.13s आहे.

Claude Opus 4.7 खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #2 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #12. हे एकूणात सर्वाधिक rank असलेल्या मॉडेल्सपैकी एक आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~5T एकूण (~500B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

10.0

विश्वसनीयता

लागू नाही

एकूण आउटपुट टोकन्स

6,326

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$5.000 / 1M

आउटपुट किंमत

$25.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 2

प्रति प्रयत्न पास दर: 88.9%

अस्थिर चाचण्या

0

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

3.13s

प्रतिसाद वेळ (कमाल): 18.27s

प्रतिसाद वेळ (एकूण): 56.33s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#4 Claude Opus 4.7

none
खर्च
$0.051
वेळ
24.2s
टोकन्स
2,181 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-05-08 13:36 पुन्हा चाचणी 6.6 10.0 $0.505 तुलना करा
2026-05-08 13:36 पुन्हा चाचणी 6.6 10.0 $0.505 तुलना करा
2026-05-08 13:36 पुन्हा चाचणी 8.9 10.0 $0.505 तुलना करा
2026-05-08 13:36 पुन्हा चाचणी 8.9 10.0 $0.507 तुलना करा
2026-05-08 13:36 सूट बदलला 8.9 10.0 $0.507 तुलना करा
2026-04-16 15:59 पहिली नोंदलेली रन 9.2 लागू नाही $0.505 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-04-16 15:59 · पहिली नोंदलेली रन54/54 प्रयत्न9.210.0लागू नाही16/1806,3260$0.5053.13s
2026-05-08 13:36 · सूट बदलला57/57 प्रयत्न8.910.010.016/1906,3290$0.5073.04s
फरक+0.30.000-30-$0.002+88ms

बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 57/57 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 8.3 10.0
कोडिंग 10.0 10.0
संयुक्त 9.5 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 7.7 10.0
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 10.0 10.0
कोडी सोडवणे 10.0 10.0
टूल कॉलिंग 10.0 10.0

तुलना केलेली मॉडेल्स