नेविगेशन
AI BENCHY
Your ad here

AI BENCHY तुलना

IBM: Granite 4.1 8B vs Mistral: Mistral Small 4

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-05-01

मेट्रिक Granite 4.1 8B Granite 4.1 8B none रिलीज़: 2026-05-01 Mistral Small 4 Mistral Small 4 medium रिलीज़: 2026-03-16
स्कोर 4.3 5.7
रैंक #135 #99
विश्वसनीयता 10.0 लागू नहीं
संगति 10.0 6.8
सही परीक्षण
प्रति प्रयास पास दर 11.1% 50.0%
अस्थिर टेस्ट 0 7
कुल रन 54 54
प्रति परिणाम लागत 0.110 0.674
कुल लागत $0.003 $0.034
???? ??? $0.050 / 1M $0.150 / 1M
????? ??? $0.100 / 1M $0.600 / 1M
आउटपुट टोकन 2,712 15,084
रीजनिंग टोकन 0 39,408
प्रतिक्रिया समय (औसत) 767ms 5.64s
प्रतिक्रिया समय (अधिकतम) 2.17s 30.49s
प्रतिक्रिया समय (कुल) 13.81s 101.52s

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

एंटी-एआई ट्रिक्स स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Granite 4.1 8B 4.9 10.0 25.0% 0 844ms 903 0
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Granite 4.1 8B 6.9 10.0 0.0% 0 1.07s 339 0
Mistral Small 4 6.7 3.5 66.7% 1 30.49s 2,796 11,296
संयुक्त स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Granite 4.1 8B 3.0 10.0 0.0% 0 1.88s 396 0
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
डेटा पार्सिंग और निष्कर्षण स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Granite 4.1 8B 3.0 10.0 0.0% 0 575ms 195 0
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
डोमेन-विशिष्ट स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Granite 4.1 8B 3.0 10.0 0.0% 0 357ms 24 0
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Samanya Buddhimatta स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Granite 4.1 8B 4.0 10.0 0.0% 0 499ms 115 0
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
निर्देश पालन स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Granite 4.1 8B 3.6 9.9 0.0% 0 344ms 66 0
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
पहेली समाधान स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Granite 4.1 8B 3.7 10.0 0.0% 0 635ms 431 0
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
टूल कॉलिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) आउटपुट टोकन रीजनिंग टोकन
Granite 4.1 8B 10.0 10.0 100.0% 0 2.17s 243 0
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810

त्वरित तुलना

तुलना जोड़ी बदलें