AI BENCHY श्रेणी अपयशे
कोडिंग: वेळ संपला
कोडिंग
वेळ संपला
कोडिंग मध्ये कोणत्या AI मॉडेल्सना वेळ संपला येण्याची शक्यता जास्त आहे ते पाहा, म्हणजे कमकुवत बाजू लवकर ओळखता येतील.
अयशस्वी होण्याची कारणे
22/22
मॉडेल फिल्टर करा
सध्याच्या शोध आणि फिल्टर्सशी जुळणारी कोणतीही मॉडेल्स नाहीत.
| क्रमांक | मॉडेल | कंपनी | वेळ संपला संख्या | श्रेणी स्कोअर | एकूण खर्च | बरोबर चाचण्या | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|
| #84 | Qwen3.5-Flash medium | Qwen | 1 | 3.7 | $0.080 | 0/3 | 58.9s |
| #94 | Step 3.5 Flash medium | Stepfun | 1 | 2.4 | $0.070 | 0/2 | 258.4s |
| #104 | Qwen3.5-35B-A3B medium | Qwen | 1 | 5.9 | $0.401 | 1/3 | 206.6s |
| #139 | Gemma 4 26B A4B none | 1 | 3.7 | $0.004 | 0/3 | 4.16s | |
| #166 | MiniMax M2.5 medium | Minimax | 1 | 3.4 | $0.303 | 0/3 | 188.6s |
| #168 | Qwen3 Coder Next medium | Qwen | 1 | 3.7 | $0.008 | 0/3 | 924ms |
| #185 | Qwen3.5-9B medium | Qwen | 1 | 2.9 | $0.036 | 0/3 | 100.9s |