नेव्हिगेशन
AI BENCHY
Your ad here

AI BENCHY Compare

Google: Gemma 4 26B A4B vs OpenAI: GPT-5.4 Mini

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-04-04

मेट्रिक Gemma 4 26B A4B Gemma 4 26B A4B none प्रकाशन: 2026-04-03 GPT-5.4 Mini GPT-5.4 Mini medium प्रकाशन: 2026-03-17
स्कोअर 6.3 7.1
क्रमांक #53 #42
सुसंगतता 9.1 7.2
बरोबर चाचण्या
प्रति प्रयत्न पास दर 47.1% 68.6%
अस्थिर चाचण्या 2 6
एकूण रन 51 51
प्रति निकाल खर्च 0.068 3.610
एकूण खर्च $0.005 $0.289
???? ??? $0.130 / 1M $0.750 / 1M
????? ??? $0.400 / 1M $4.500 / 1M
आउटपुट टोकन्स 1,335 1,708
रिझनिंग टोकन्स 0 58,019
प्रतिसाद वेळ (सरासरी) 6.56s 15.66s
प्रतिसाद वेळ (कमाल) 57.10s 102.91s
प्रतिसाद वेळ (एकूण) 111.54s 266.14s

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

अँटी-एआय युक्त्या स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 26B A4B 8.3 10.0 75.0% 0 1.28s 230 0
GPT-5.4 Mini 8.6 7.9 91.7% 1 4.05s 296 2,876
संयुक्त स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 26B A4B 3.0 10.0 0.0% 0 30.53s 309 0
GPT-5.4 Mini 10.0 10.0 100.0% 0 17.81s 317 4,317
डेटा पार्सिंग आणि निष्कर्षण स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 26B A4B 10.0 10.0 100.0% 0 1.70s 285 0
GPT-5.4 Mini 10.0 10.0 100.0% 0 2.43s 234 650
डोमेन-विशिष्ट स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 26B A4B 3.6 7.2 22.2% 1 2.49s 27 0
GPT-5.4 Mini 4.1 4.4 44.5% 2 65.31s 60 43,286
Samanya Buddhimatta स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 26B A4B 4.0 10.0 0.0% 0 3.54s 85 0
GPT-5.4 Mini 4.5 10.0 0.0% 0 3.72s 150 510
सूचनांचे पालन स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 26B A4B 4.4 6.9 16.7% 1 1.08s 75 0
GPT-5.4 Mini 7.4 6.5 66.7% 1 2.50s 129 1,337
Puzzle Solving स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 26B A4B 5.7 10.0 33.3% 0 739ms 114 0
GPT-5.4 Mini 6.8 7.9 55.6% 1 4.33s 271 2,449
टूल कॉलिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 26B A4B 10.0 10.0 100.0% 0 57.10s 210 0
GPT-5.4 Mini 4.7 1.6 66.7% 1 9.62s 251 2,594

झटपट तुलना

तुलना जोडी बदला