नेव्हिगेशन
AI BENCHY
Your ad here

AI BENCHY Compare

Mistral: Mistral Small 4 vs OpenAI: GPT-4o-mini

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-03-17

मेट्रिक Mistral Small 4 Mistral Small 4 none प्रकाशन: 2026-03-16 GPT-4o-mini GPT-4o-mini none प्रकाशन: 2024-07-18
क्रमांक #61 #63
स्कोअर 5.3 5.0
सुसंगतता 9.5 10.0
प्रति निकाल खर्च 0.108 0.115
एकूण खर्च $0.006 $0.005
बरोबर चाचण्या
प्रति प्रयत्न पास दर 33.3% 23.5%
अस्थिर चाचण्या 1 0
एकूण रन 51 51
आउटपुट टोकन्स 1,624 1,600
रिझनिंग टोकन्स 0 0
प्रतिसाद वेळ (सरासरी) 629ms 1.94s
प्रतिसाद वेळ (कमाल) 1.72s 7.58s
प्रतिसाद वेळ (एकूण) 10.70s 19.44s

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

अँटी-एआय युक्त्या स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 3.4 7.9 16.7% 1 395ms 182 0
GPT-4o-mini 4.8 10.0 25.0% 0 1.34s 186 0
संयुक्त स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 3.0 10.0 0.0% 0 1.72s 496 0
GPT-4o-mini 3.0 10.0 0.0% 0 7.58s 568 0
डेटा पार्सिंग आणि निष्कर्षण स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 10.0 10.0 100.0% 0 822ms 261 0
GPT-4o-mini 10.0 10.0 100.0% 0 1.27s 183 0
डोमेन-विशिष्ट स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 5.3 10.0 33.3% 0 367ms 28 0
GPT-4o-mini 3.0 10.0 0.0% 0 637ms 15 0
Samanya Buddhimatta स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 4.0 10.0 0.0% 0 729ms 205 0
GPT-4o-mini 4.0 10.0 0.0% 0 909ms 66 0
सूचनांचे पालन स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 6.5 10.0 50.0% 0 380ms 69 0
GPT-4o-mini 4.8 10.0 0.0% 0 1.27s 69 0
Puzzle Solving स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 3.1 9.9 0.0% 0 589ms 170 0
GPT-4o-mini 3.7 10.0 0.0% 0 1.30s 308 0
टूल कॉलिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 10.0 10.0 100.0% 0 1.40s 213 0
GPT-4o-mini 10.0 10.0 100.0% 0 2.51s 205 0

झटपट तुलना

तुलना जोडी बदला