التنقل
AI BENCHY
Advertise here

AI BENCHY Compare

Mistral: Mistral Small 4 vs OpenAI: GPT-4o-mini

الملخص

مقارنة benchmark بين Mistral Small 4 و GPT-4o-mini: يتقدم Mistral Small 4 في متوسط النتيجة بـ 5.1 مقابل 5.0. لدى GPT-4o-mini تكلفة benchmark أقل عند $0.006 مقابل $0.068. GPT-4o-mini أسرع عند 1.77s مقابل 9.40s، مع معدلات نجاح 44.4% مقابل 23.8%.

النموذج الموصى به: GPT-4o-mini - Its score stays close to the best score here (5.0 vs 5.1), while costing about 11.4x less than Mistral Small 4.

تم إنشاء نتائج المعايير من مجموعات اختبارات AI BENCHY في: 2026-06-12

المقياس Mistral Small 4 Mistral Small 4 medium الإصدار: 2026-03-16 GPT-4o-mini GPT-4o-mini none الإصدار: 2024-07-18
النتيجة 5.1 5.0
الترتيب #138 #143
الموثوقية 10.0 10.0
الاتساق 6.9 9.9
اختبارات صحيحة
معدل النجاح لكل محاولة 44.4% 23.8%
اختبارات غير مستقرة 8 0
إجمالي مرات التشغيل 63 63
التكلفة لكل نتيجة 1.344 0.119
إجمالي التكلفة $0.068 $0.006
سعر الإدخال $0.150 / 1M $0.150 / 1M
سعر الإخراج $0.600 / 1M $0.600 / 1M
إجمالي رموز الإدخال 42,576 31,518
رموز الإخراج 24,184 1,982
رموز الاستدلال 84,678 0
زمن الاستجابة (المتوسط) 9.40s 1.77s
زمن الاستجابة (الحد الأقصى) 59.15s 7.58s
زمن الاستجابة (الإجمالي) 197.39s 24.80s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#138 Mistral Small 4

medium
Cost
$0.006
Time
47.9s
Tokens
9,857 tok

#143 GPT-4o-mini

none
Cost
$0.001
Time
6.6s
Tokens
742 tok

أفضل النماذج حسب الدرجة

الدرجة مقابل التكلفة الإجمالية

زمن الاستجابة (المتوسط)

النتيجة vs زمن الاستجابة (المتوسط)

إجمالي رموز الإخراج

النتيجة vs إجمالي رموز الإخراج

تفصيل الفئات

حيل مضادة للذكاء الاصطناعي النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 708 4,055 4,778
GPT-4o-mini 4.8 10.0 25.0% 0 1.34s 618 186 0
البرمجة النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715
GPT-4o-mini 3.2 9.6 0.0% 0 1.63s 7,314 367 0
مجمّع النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 18,706 2,612 10,700
GPT-4o-mini 3.0 10.0 0.0% 0 7.58s 8,298 568 0
تحليل البيانات واستخراجها النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 6,171 335 723
GPT-4o-mini 10.0 10.0 100.0% 0 1.27s 7,161 183 0
خاص بالمجال النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 742 2,621 6,904
GPT-4o-mini 3.0 10.0 0.0% 0 637ms 732 15 0
الذكاء العام النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 519 821 828
GPT-4o-mini 4.0 10.0 0.0% 0 909ms 480 66 0
اتباع التعليمات النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 729 540 1,031
GPT-4o-mini 6.3 10.0 50.0% 0 1.11s 666 69 0
حل الألغاز النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
Mistral Small 4 3.4 9.7 0.0% 0 2.17s 735 1,226 2,632
GPT-4o-mini 3.5 10.0 0.0% 0 1.21s 651 308 0
استدعاء الأدوات النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 6,420 321 810
GPT-4o-mini 10.0 10.0 100.0% 0 2.51s 5,400 205 0
معلومات عامة النتيجة الاتساق معدل النجاح لكل محاولة اختبارات غير مستقرة اختبارات صحيحة زمن الاستجابة (المتوسط) رموز الإدخال رموز الإخراج رموز الاستدلال
Mistral Small 4 3.0 10.0 0.0% 0 5.92s 210 18 1,557
GPT-4o-mini 3.0 10.0 0.0% 0 794ms 198 15 0

مقارنة سريعة

تبديل زوج المقارنة