AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#121

Mistral Small 4

Mistral اجرا: 2026-03-16 ٹیسٹ کیا گیا: 2026-05-22 00:16 mistralai/mistral-small-2603::medium
(medium) (none)

خلاصہ

Mistral Small 4 AI BENCHY پر 5.4 اسکور کرتا ہے اور #121 پر ہے۔ اس کی reliability 10.0، pass rate 45.0%، کل لاگت $0.056، اور اوسط response time 8.33s ہے۔

Mistral Small 4 کو منفرد کیا بناتا ہے: یہ اینٹی اے آئی چالیں میں سب سے نمایاں ہے، جہاں اس کا rank #2 ہے؛ جبکہ ڈیٹا پارسنگ اور استخراج اس کا کمزور ترین حصہ ہے، rank #9. یہ غیر معمولی طور پر زیادہ reasoning tokens استعمال کرتا ہے، جو سست یا مہنگے runs کی وجہ ہو سکتی ہے۔

تسلسل

7.1

کل آؤٹ پٹ ٹوکنز

89,683

کل ان پٹ ٹوکنز

0

ان پٹ قیمت

$0.150 / 1M

آؤٹ پٹ قیمت

$0.600 / 1M

درست ٹیسٹس

غلط ٹیسٹس: 15

فی کوشش کامیابی کی شرح: 45.0%

غیر مستحکم ٹیسٹ

7

غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).

ردِعمل کا وقت (اوسط)

8.33s

ردِعمل کا وقت (زیادہ سے زیادہ): 59.15s

ردِعمل کا وقت (کل): 166.59s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#121 Mistral Small 4

medium
Cost
$0.006
Time
47.9s
Tokens
9,857 tok

رن ہسٹری

ٹیسٹ کیا گیا اسکور اعتماد پذیری درست ٹیسٹس کل لاگت موازنہ کریں
2026-06-04 13:43 نیا ٹیسٹ شامل ہوا 5.3 10.0 $0.068 موازنہ کریں
2026-05-22 00:16 سوٹ بدل گیا 5.4 10.0 $0.056 موجودہ رن
2026-04-11 01:44 پہلا ریکارڈ شدہ رن 5.7 دستیاب نہیں $0.034 موازنہ کریں

اس رن میں مختلف بینچ مارک سوٹ استعمال ہوا تھا۔ تاریخی تبدیلی سمجھتے وقت سوٹ کی تبدیلی کو بھی ذہن میں رکھیں۔

رن موازنہ

رناسکورتسلسلاعتماد پذیریدرست ٹیسٹسغیر مستحکم ٹیسٹکل آؤٹ پٹ ٹوکنزکل ان پٹ ٹوکنزکل لاگتردِعمل کا وقت (اوسط)
2026-05-22 00:16 · سوٹ بدل گیا5.47.110.05/20789,6830$0.0568.33s
2026-04-11 01:44 · پہلا ریکارڈ شدہ رن5.76.8دستیاب نہیں5/18754,4920$0.0345.64s
فرق-0.3+0.300+351910+$0.022+2689ms

ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔

چارٹس

پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

زمرہ اسکور تسلسل درست ٹیسٹس
اینٹی اے آئی چالیں 5.6 3.8
کوڈنگ 5.1 6.8
مشترکہ 3.0 10.0
ڈیٹا پارسنگ اور استخراج 7.3 5.9
ڈومین مخصوص 5.3 7.2
عمومی ذہانت 4.8 10.0
ہدایات کی پیروی 7.3 5.8
پہیلی حل کرنا 3.4 9.7
ٹول کالنگ 10.0 10.0
معلومات عامہ 3.0 10.0

موازنہ کیے گئے ماڈلز