नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Kwaipilot: KAT-Coder-Air V2.5 vs Qwen: Qwen3.5-Flash

सारांश

KAT-Coder-Air V2.5 (high) average score में आगे है: 6.2 vs 6.1. Qwen3.5-Flash की benchmark लागत कम है: $0.005 vs $0.064. Qwen3.5-Flash तेज है: 3.58s vs 11.02s, pass rates 46.0% vs 39.7%.

अनुशंसित मॉडलQwen3.5-FlashIts score stays close to the best score here (6.1 vs 6.2), while costing about 15.4x less than KAT-Coder-Air V2.5 (high).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high रिलीज़: 2026-07-14 Qwen3.5-Flash Qwen3.5-Flash none रिलीज़: 2026-02-24
स्कोर 6.2 6.1
रैंक #110 #119
विश्वसनीयता 9.7 10.0
संगति 7.6 9.7
सही परीक्षण
प्रति प्रयास पास दर 46.0% 39.7%
अस्थिर टेस्ट 6 1
कुल रन 63 63
प्रति परिणाम लागत 0.910 0.075
कुल लागत $0.064 $0.005
इनपुट कीमत $0.150 / 1M $0.065 / 1M
आउटपुट कीमत $0.600 / 1M $0.260 / 1M
कुल इनपुट टोकन 41,748 46,439
आउटपुट टोकन 3,894 4,276
रीजनिंग टोकन 91,773 0
प्रतिक्रिया समय (औसत) 11.02s 3.58s
प्रतिक्रिया समय (अधिकतम) 104.98s 27.18s
प्रतिक्रिया समय (कुल) 231.37s 75.28s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 KAT-Coder-Air V2.5

high
अमान्य SVG
लागत
$0.000
समय
300.0s
टोकन
0 tok

#119 Qwen3.5-Flash

none
लागत
$0.003
समय
47.4s
टोकन
7,799 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
Qwen3.5-Flash 5.5 10.0 33.3% 0 850ms 7,913 519 0

त्वरित तुलना

तुलना जोड़ी बदलें