Baseten
الإصدار: 2026-10-24
تم الاختبار في: 2026-10-24 15:07
baseten/mammoth-1::none
27Bكثيفمفتوح المصدر الملخص
يسجل Mammoth 1 نتيجة 2.2 في AI BENCHY ويحتل المرتبة #442. لديه موثوقية 8.9، ومعدل نجاح 18.8%، وتكلفة إجمالية $0.000، ومتوسط زمن استجابة 1.80s.
ما الذي يجعل Mammoth 1 مميزًا: يبرز أكثر في البرمجة حيث يحتل #1، بينما تعد تحليل البيانات واستخراجها أضعف نقاطه عند #13. تكلفة الاختبار الإجمالية منخفضة بشكل غير معتاد لهذا مستوى النتيجة.
حقائق النموذج
تاريخ البحث: 2026-10-24
- المعلمات
- 27B
- البنية
- كثيف
- الإتاحة
- مفتوح المصدر
- الترخيص
- MIT
2.2
الاتساق
4.2
8.9
إجمالي رموز الإخراج
54
إجمالي رموز الإدخال
45,468
سعر الإدخال
$0.000 / 1M
سعر الإخراج
$0.000 / 1M
سعر قراءة ذاكرة التخزين المؤقت
غير متاح
سعر الكتابة في ذاكرة التخزين المؤقت
غير متاح
تنطبق أسعار التخزين المؤقت على رموز الإدخال. تعيد القراءة استخدام المطالبات المخزنة؛ وتحفظها الكتابة وقد تكلّف أكثر. تُحاسب رموز الإخراج بسعر الإخراج.
الاختبارات الخاطئة: 9
معدل النجاح لكل محاولة: 18.8%
تغطية الاختبار المعياري: 36/69 محاولات. توفر المحولات الخيارات. يدعم 12/23 من الاختبارات. الاختبارات الأخرى غير مدعومة وليست فاشلة. تُحسب الدرجة على أساس مجموعة الاختبارات الكاملة.
اختبارات غير مستقرة
3
الاختبارات غير المستقرة لها نتائج مختلطة بين التشغيلات (نجاح واحد على الأقل وفشل واحد على الأقل).
الرسوم البيانية
اختر النموذج الأول، ثم انقر على نموذج ثانٍ لفتح صفحة مقارنة جنبًا إلى جنب.
النتيجة vs إجمالي التكلفة
زمن الاستجابة (المتوسط)
النتيجة vs زمن الاستجابة (المتوسط)
إجمالي رموز الإخراج
النتيجة vs إجمالي رموز الإخراج
مقارنة سريعة
Mammoth 1defaultمتاح مجانًاvsJev 1.14defaultMammoth 1defaultمتاح مجانًاvsClassify-1defaultMammoth 1defaultمتاح مجانًاvsKev 4BdefaultMammoth 1defaultمتاح مجانًاvsClef OmnidefaultMammoth 1defaultمتاح مجانًاvsGPT-6 Luna DecisionsdefaultMammoth 1defaultمتاح مجانًاvsDecider Flash V1.2defaultMammoth 1defaultمتاح مجانًاvsDrex v1.5defaultMammoth 1defaultمتاح مجانًاvsD1defaultMammoth 1defaultمتاح مجانًاvsDecider V1.1 27BdefaultMammoth 1defaultمتاح مجانًاvsGemini 3 Flash Previewhigh
تفصيل الفئات
| الفئة | النتيجة | الاتساق | اختبارات صحيحة |
|---|---|---|---|
| مهام الوكلاء | 0.0 | 0.0 | |
| حيل مضادة للذكاء الاصطناعي | 4.0 | 7.5 | |
| البرمجة | 4.9 | 6.7 | |
| مجمّع | 0.0 | 0.0 | |
| تحليل البيانات واستخراجها | 3.7 | 1.7 | |
| خاص بالمجال | 5.3 | 10.0 | |
| الذكاء العام | 0.0 | 0.0 | |
| اتباع التعليمات | 1.5 | 5.0 | |
| حل الألغاز | 1.6 | 1.0 | |
| استدعاء الأدوات | 0.0 | 0.0 | |
| معلومات عامة | 0.0 | 0.0 |