AI BENCHY
Advertise here
#141

Qwen3 Coder Next

Qwen रिलीज़: 2026-02-03 परीक्षण किया गया: 2026-05-21 23:45 qwen/qwen3-coder-next::medium
80B कुल (3B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

Qwen3 Coder Next AI BENCHY पर 4.7 स्कोर करता है और #141 पर है। इसकी reliability 10.0, pass rate 30.0%, कुल लागत $0.008, और औसत response time 9.29s है।

Qwen3 Coder Next को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

घोषित
पैरामीटर
80B कुल (3B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
लाइसेंस
Apache-2.0

संगति

8.9

कुल आउटपुट टोकन

3,280

कुल इनपुट टोकन

0

इनपुट कीमत

$0.110 / 1M

आउटपुट कीमत

$0.800 / 1M

सही परीक्षण

गलत टेस्ट: 16

प्रति प्रयास पास दर: 30.0%

अस्थिर टेस्ट

3

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

9.29s

प्रतिक्रिया समय (अधिकतम): 81.80s

प्रतिक्रिया समय (कुल): 130.06s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#141 Qwen3 Coder Next

medium
अमान्य SVG
लागत
$0.000
समय
300.0s
टोकन
0 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-08-14 01:38 दोबारा परीक्षण 4.6 10.0 $0.034 तुलना करें
2026-07-16 21:16 नया टेस्ट जोड़ा गया 4.7 10.0 $0.032 तुलना करें
2026-06-04 13:09 नया टेस्ट जोड़ा गया 4.6 10.0 $0.008 तुलना करें
2026-05-21 23:45 सूट बदला गया 4.7 10.0 $0.008 वर्तमान रन
2026-04-14 00:56 पहला दर्ज रन 4.7 लागू नहीं $0.008 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-05-21 23:45 · सूट बदला गया60/60 प्रयास4.78.910.04/2033,2800$0.0089.29s
2026-08-14 01:38 · दोबारा परीक्षण66/66 प्रयास4.68.610.03/22419,069148,203$0.0349.07s
अंतर+0.1+0.30.0+1-1-15789-148203-$0.026+220ms

बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 3.5 8.1
कोडिंग 4.1 5.8
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 6.5 10.0
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 6.3 3.4
निर्देश पालन 6.3 10.0
पहेली समाधान 3.0 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल