नेव्हिगेशन
AI BENCHY
Your ad here

AI BENCHY Compare

Mistral: Mistral Small 4 vs OpenAI: GPT-5.4 Nano

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-05-01

मेट्रिक Mistral Small 4 Mistral Small 4 medium प्रकाशन: 2026-03-16 GPT-5.4 Nano GPT-5.4 Nano none प्रकाशन: 2026-03-17
स्कोअर 5.7 4.6
क्रमांक #99 #127
विश्वसनीयता लागू नाही लागू नाही
सुसंगतता 6.8 7.4
बरोबर चाचण्या
प्रति प्रयत्न पास दर 50.0% 33.3%
अस्थिर चाचण्या 7 6
एकूण रन 54 54
प्रति निकाल खर्च 0.674 0.299
एकूण खर्च $0.034 $0.009
???? ??? $0.150 / 1M $0.200 / 1M
????? ??? $0.600 / 1M $1.250 / 1M
आउटपुट टोकन्स 15,084 2,762
रिझनिंग टोकन्स 39,408 0
प्रतिसाद वेळ (सरासरी) 5.64s 1.40s
प्रतिसाद वेळ (कमाल) 30.49s 3.84s
प्रतिसाद वेळ (एकूण) 101.52s 25.14s

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

अँटी-एआय युक्त्या स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
GPT-5.4 Nano 3.5 8.0 16.7% 1 1.18s 800 0
कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 6.7 3.5 66.7% 1 30.49s 2,796 11,296
GPT-5.4 Nano 7.1 3.7 66.7% 1 1.43s 577 0
संयुक्त स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
GPT-5.4 Nano 3.0 10.0 0.0% 0 3.84s 280 0
डेटा पार्सिंग आणि निष्कर्षण स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
GPT-5.4 Nano 6.5 10.0 50.0% 0 1.11s 219 0
डोमेन-विशिष्ट स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
GPT-5.4 Nano 2.9 4.4 22.2% 2 926ms 52 0
Samanya Buddhimatta स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
GPT-5.4 Nano 3.8 2.5 33.3% 1 1.31s 180 0
सूचनांचे पालन स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
GPT-5.4 Nano 6.3 10.0 50.0% 0 787ms 84 0
कोडी सोडवणे स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
GPT-5.4 Nano 3.7 7.3 22.2% 1 1.29s 348 0
टूल कॉलिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) आउटपुट टोकन्स रिझनिंग टोकन्स
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810
GPT-5.4 Nano 10.0 10.0 100.0% 0 3.40s 222 0

झटपट तुलना

तुलना जोडी बदला