नेव्हिगेशन
AI BENCHY
Your ad here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Google: Gemma 4 26B A4B

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-04-30

मेट्रिक Claude Sonnet 4.6 Claude Sonnet 4.6 medium प्रकाशन: 2026-02-17 Gemma 4 26B A4B Gemma 4 26B A4B medium प्रकाशन: 2026-04-03 मोफत उपलब्ध
स्कोअर 8.0 8.0
क्रमांक #36 #35
विश्वसनीयता लागू नाही लागू नाही
सुसंगतता 9.5 9.0
बरोबर चाचण्या
प्रति प्रयत्न पास दर 74.1% 75.9%
अस्थिर चाचण्या 1 2
एकूण रन 54 54
प्रति निकाल खर्च 8.930 0.214
एकूण खर्च $1.161 $0.028
???? ??? $3.000 / 1M $0.060 / 1M
????? ??? $15.000 / 1M $0.330 / 1M
आउटपुट टोकन्स 42,068 15,928
रिझनिंग टोकन्स 26,784 44,631
प्रतिसाद वेळ (सरासरी) 12.66s 25.03s
प्रतिसाद वेळ (कमाल) 46.35s 147.47s
प्रतिसाद वेळ (एकूण) 126.62s 425.48s

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

अँटी-एआय युक्त्या स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Claude Sonnet 4.6 6.5 10.0 50.0% 0 2.98s 1,046 1,093
Gemma 4 26B A4B 10.0 10.0 100.0% 0 6.20s 1,142 3,045
कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Claude Sonnet 4.6 10.0 10.0 100.0% 0 35.76s 6,894 2,097
Gemma 4 26B A4B 2.8 10.0 0.0% 0 147.47s 3,516 4,676
संयुक्त स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Claude Sonnet 4.6 10.0 10.0 100.0% 0 46.35s 5,871 3,962
Gemma 4 26B A4B 9.6 10.0 100.0% 0 73.55s 5,415 13,112
डेटा पार्सिंग आणि निष्कर्षण स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Claude Sonnet 4.6 10.0 10.0 100.0% 0 13.90s 649 742
Gemma 4 26B A4B 10.0 10.0 100.0% 0 16.51s 1,567 2,827
डोमेन-विशिष्ट स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Claude Sonnet 4.6 2.9 7.2 11.1% 1 0ms 25,790 16,919
Gemma 4 26B A4B 2.9 4.4 22.2% 2 23.62s 2,469 7,105
Samanya Buddhimatta स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Claude Sonnet 4.6 10.0 10.0 100.0% 0 4.94s 256 433
Gemma 4 26B A4B 10.0 10.0 100.0% 0 29.76s 25 5,075
सूचनांचे पालन स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Claude Sonnet 4.6 10.0 10.0 100.0% 0 2.61s 318 552
Gemma 4 26B A4B 10.0 10.0 100.0% 0 17.54s 887 4,470
कोडी सोडवणे स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Claude Sonnet 4.6 10.0 10.0 100.0% 0 4.80s 589 635
Gemma 4 26B A4B 7.9 9.6 66.7% 0 8.52s 457 3,065
टूल कॉलिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Claude Sonnet 4.6 10.0 10.0 100.0% 0 7.48s 655 351
Gemma 4 26B A4B 10.0 10.0 100.0% 0 9.01s 450 1,256

झटपट तुलना

तुलना जोडी बदला