- الترتيب
- #391
- إجمالي رموز الإخراج
- 40,302
- زمن الاستجابة (المتوسط)
- 3.34s
- إجمالي التكلفة
- $0.020
Mercury 2.5 (low) vs KAT Coder AIR V2.5 (high)
يتقدم KAT Coder AIR V2.5 (high) في متوسط النتيجة بـ 5.2 مقابل 5.1. لدى Mercury 2.5 (low) تكلفة benchmark أقل عند $0.020 مقابل $0.077. Mercury 2.5 (low) أسرع عند 3.34s مقابل 15.23s، مع معدلات نجاح 37.7% مقابل 40.6%.
النماذج المقارنة
- الترتيب
- #386
- إجمالي رموز الإخراج
- 114,654
- زمن الاستجابة (المتوسط)
- 15.23s
- إجمالي التكلفة
- $0.077
النموذج الموصى به
Mercury 2.5 (low)
Its score stays close to the best score here (5.1 vs 5.2), while costing about 4.0x less than KAT Coder AIR V2.5 (high).
مقارنة تفصيلية
| المقياس | Mercury 2.5 Mercury 2.5 low | KAT Coder AIR V2.5 KAT Coder AIR V2.5 high |
|---|---|---|
| النتيجة | 5.1 | 5.2 |
| الترتيب | #391 | #386 |
| الموثوقية | 9.8 | 9.8 |
| الاتساق | 8.2 | 8.2 |
| محاولات | 69/69 | 69/69 |
| اختبارات صحيحة | ||
| معدل النجاح لكل محاولة | 37.7% | 40.6% |
| اختبارات غير مستقرة | 5 | 5 |
| إجمالي مرات التشغيل | 69 | 69 |
| التكلفة لكل نتيجة | 0.319 | 1.091 |
| إجمالي التكلفة | $0.020 | $0.077 |
| سعر الإدخال | $0.040 / 1M | $0.150 / 1M |
| سعر الإخراج | $0.150 / 1M | $0.600 / 1M |
| سعر قراءة ذاكرة التخزين المؤقت | $0.004 / 1M | غير متاح |
| سعر الكتابة في ذاكرة التخزين المؤقت | غير متاح | غير متاح |
| إجمالي رموز الإدخال | 326,083 | 50,423 |
| رموز الإخراج | 7,224 | 4,144 |
| رموز الاستدلال | 33,078 | 110,510 |
| زمن الاستجابة (المتوسط) | 3.34s | 15.23s |
| زمن الاستجابة (الحد الأقصى) | 47.06s | 118.35s |
| زمن الاستجابة (الإجمالي) | 76.80s | 350.26s |
| المعلمات | ~100B | ~35B الإجمالي (~3B النشطة) |
| الإتاحة | مغلق المصدر | مغلق المصدر |
تنطبق أسعار التخزين المؤقت على رموز الإدخال. تعيد القراءة استخدام المطالبات المخزنة؛ وتحفظها الكتابة وقد تكلّف أكثر. تُحاسب رموز الإخراج بسعر الإخراج.
عرض إنشاء النماذج
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#391 Mercury 2.5
low- التكلفة
- $0.001
- الوقت
- 2.4s
- الرموز
- 1,236 tok
#386 KAT Coder AIR V2.5
high
Reached the allocated time limit (300 seconds) without receiving showcase output.
- التكلفة
- $0.000
- الوقت
- 300.0s
- الرموز
- 0 tok
تفصيل الفئات
| مهام الوكلاء | النتيجة | الاتساق | معدل النجاح لكل محاولة | اختبارات غير مستقرة | اختبارات صحيحة | زمن الاستجابة (المتوسط) | رموز الإدخال | رموز الإخراج | رموز الاستدلال |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 5.0 | 10.0 | 0.0% | 0 | 47.06s | 188,063 | 1,141 | 5,442 | |
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 1.10s | 0 | 0 | 0 |
| حيل مضادة للذكاء الاصطناعي | النتيجة | الاتساق | معدل النجاح لكل محاولة | اختبارات غير مستقرة | اختبارات صحيحة | زمن الاستجابة (المتوسط) | رموز الإدخال | رموز الإخراج | رموز الاستدلال |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 6.9 | 7.9 | 66.7% | 1 | 799ms | 772 | 209 | 2,969 | |
| KAT Coder AIR V2.5 | 6.9 | 5.8 | 75.0% | 2 | 2.49s | 615 | 204 | 1,290 |
| البرمجة | النتيجة | الاتساق | معدل النجاح لكل محاولة | اختبارات غير مستقرة | اختبارات صحيحة | زمن الاستجابة (المتوسط) | رموز الإدخال | رموز الإخراج | رموز الاستدلال |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 5.5 | 10.0 | 33.3% | 0 | 972ms | 7,909 | 521 | 2,269 | |
| KAT Coder AIR V2.5 | 4.3 | 7.3 | 11.1% | 1 | 39.07s | 6,948 | 1,166 | 55,883 |
| مجمّع | النتيجة | الاتساق | معدل النجاح لكل محاولة | اختبارات غير مستقرة | اختبارات صحيحة | زمن الاستجابة (المتوسط) | رموز الإدخال | رموز الإخراج | رموز الاستدلال |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 3.0 | 10.0 | 0.0% | 0 | 5.16s | 107,683 | 3,750 | 11,351 | |
| KAT Coder AIR V2.5 | 6.5 | 10.0 | 50.0% | 0 | 74.48s | 23,854 | 485 | 28,559 |
| تحليل البيانات واستخراجها | النتيجة | الاتساق | معدل النجاح لكل محاولة | اختبارات غير مستقرة | اختبارات صحيحة | زمن الاستجابة (المتوسط) | رموز الإدخال | رموز الإخراج | رموز الاستدلال |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 6.5 | 10.0 | 50.0% | 0 | 1.06s | 8,322 | 739 | 1,499 | |
| KAT Coder AIR V2.5 | 6.5 | 10.0 | 50.0% | 0 | 3.59s | 7,776 | 284 | 2,140 |
| خاص بالمجال | النتيجة | الاتساق | معدل النجاح لكل محاولة | اختبارات غير مستقرة | اختبارات صحيحة | زمن الاستجابة (المتوسط) | رموز الإدخال | رموز الإخراج | رموز الاستدلال |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 3.6 | 7.2 | 22.2% | 1 | 846ms | 851 | 57 | 2,265 | |
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 7.28s | 724 | 1,101 | 7,738 |
| الذكاء العام | النتيجة | الاتساق | معدل النجاح لكل محاولة | اختبارات غير مستقرة | اختبارات صحيحة | زمن الاستجابة (المتوسط) | رموز الإدخال | رموز الإخراج | رموز الاستدلال |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 4.4 | 9.9 | 0.0% | 0 | 819ms | 525 | 99 | 748 | |
| KAT Coder AIR V2.5 | 5.1 | 10.0 | 0.0% | 0 | 7.10s | 516 | 179 | 539 |
| اتباع التعليمات | النتيجة | الاتساق | معدل النجاح لكل محاولة | اختبارات غير مستقرة | اختبارات صحيحة | زمن الاستجابة (المتوسط) | رموز الإدخال | رموز الإخراج | رموز الاستدلال |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 2.9 | 6.0 | 16.7% | 1 | 972ms | 518 | 48 | 1,026 | |
| KAT Coder AIR V2.5 | 9.8 | 10.0 | 100.0% | 0 | 1.51s | 699 | 90 | 675 |
| حل الألغاز | النتيجة | الاتساق | معدل النجاح لكل محاولة | اختبارات غير مستقرة | اختبارات صحيحة | زمن الاستجابة (المتوسط) | رموز الإدخال | رموز الإخراج | رموز الاستدلال |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 5.9 | 4.5 | 66.7% | 2 | 792ms | 768 | 249 | 2,214 | |
| KAT Coder AIR V2.5 | 3.5 | 4.4 | 33.3% | 2 | 2.47s | 696 | 285 | 1,576 |
| استدعاء الأدوات | النتيجة | الاتساق | معدل النجاح لكل محاولة | اختبارات غير مستقرة | اختبارات صحيحة | زمن الاستجابة (المتوسط) | رموز الإدخال | رموز الإخراج | رموز الاستدلال |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 9.8 | 10.0 | 100.0% | 0 | 2.72s | 10,440 | 388 | 2,537 | |
| KAT Coder AIR V2.5 | 10.0 | 10.0 | 100.0% | 0 | 4.77s | 8,391 | 330 | 1,082 |
| معلومات عامة | النتيجة | الاتساق | معدل النجاح لكل محاولة | اختبارات غير مستقرة | اختبارات صحيحة | زمن الاستجابة (المتوسط) | رموز الإدخال | رموز الإخراج | رموز الاستدلال |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2.5 | 3.0 | 10.0 | 0.0% | 0 | 782ms | 232 | 23 | 758 | |
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 21.72s | 204 | 20 | 11,028 |
مقارنة سريعة
تبديل زوج المقارنة
Mercury 2.5lowvsKAT Coder AIR V2.5mediumMercury 2.5lowvsMiMo-V2.5-PrononeMercury 2.5lowvsMistral Small 4noneMercury 2.5lowvsMistral Small 4mediumLing 3.0 FlashnonevsKAT Coder AIR V2.5highApodex 1.1 Minidefaultمتاح مجانًاvsMercury 2.5lowKAT Coder AIR V2.5highvsInkling Smalllowمتاح مجانًاKAT Coder AIR V2.5highvsMistral Small 4mediumKAT Coder AIR V2.5highvsMistral Small 4noneMercury 2.5lowvsLaguna S 2.1mediumمتاح مجانًاKAT Coder AIR V2.5highvsMiMo-V2.5-PrononeMercury 2.5lowvsNemotron 3.5 Lightninghighمتاح مجانًا