नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs Qwen: Qwen3.5-Flash

सारांश

average score जवळपास समान आहे: 6.8 vs 6.8. Qwen3.5-Flash (medium) चा benchmark खर्च कमी आहे: $0.080 vs $0.220. KAT-Coder-Pro V2.5 वेगवान आहे: 10.81s vs 63.29s, pass rates 71.4% vs 71.4%.

शिफारस केलेले मॉडेलKAT-Coder-Pro V2.5It has the best score here (6.8), while responding about 5.9x faster than Qwen3.5-Flash (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none प्रकाशन: 2026-07-14 Qwen3.5-Flash Qwen3.5-Flash medium प्रकाशन: 2026-02-24
स्कोअर 6.8 6.8
क्रमांक #89 #87
विश्वसनीयता 10.0 10.0
सुसंगतता 7.3 8.1
बरोबर चाचण्या
प्रति प्रयत्न पास दर 71.4% 71.4%
अस्थिर चाचण्या 7 5
एकूण रन 63 63
प्रति निकाल खर्च 1.992 0.871
एकूण खर्च $0.220 $0.080
इनपुट किंमत $0.740 / 1M $0.065 / 1M
आउटपुट किंमत $2.960 / 1M $0.260 / 1M
एकूण इनपुट टोकन्स 42,749 38,926
आउटपुट टोकन्स 63,338 2,088
रिझनिंग टोकन्स 0 294,598
प्रतिसाद वेळ (सरासरी) 10.81s 63.29s
प्रतिसाद वेळ (कमाल) 53.57s 234.29s
प्रतिसाद वेळ (एकूण) 227.02s 1265.85s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 KAT-Coder-Pro V2.5

none
खर्च
$0.010
वेळ
29.0s
टोकन्स
3,439 tok

#87 Qwen3.5-Flash

medium
खर्च
$0.002
वेळ
25.8s
टोकन्स
4,294 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
Qwen3.5-Flash 3.7 7.2 22.2% 1 58.87s 6,685 302 90,081

झटपट तुलना

तुलना जोडी बदला