नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Google: Gemini 2.5 Flash vs Kwaipilot: KAT-Coder-Air V2.5

सारांश

KAT-Coder-Air V2.5 (high) average score में आगे है: 6.2 vs 6.2. Gemini 2.5 Flash की benchmark लागत कम है: $0.016 vs $0.064. Gemini 2.5 Flash तेज है: 875ms vs 11.02s, pass rates 46.0% vs 46.0%.

अनुशंसित मॉडलGemini 2.5 FlashIts score stays close to the best score here (6.2 vs 6.2), while costing about 4.2x less than KAT-Coder-Air V2.5 (high).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक Gemini 2.5 Flash Gemini 2.5 Flash none रिलीज़: 2025-06-17 KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high रिलीज़: 2026-07-14
स्कोर 6.2 6.2
रैंक #114 #110
विश्वसनीयता 10.0 9.7
संगति 9.6 7.6
सही परीक्षण
प्रति प्रयास पास दर 46.0% 46.0%
अस्थिर टेस्ट 1 6
कुल रन 63 63
प्रति परिणाम लागत 0.169 0.910
कुल लागत $0.016 $0.064
इनपुट कीमत $0.300 / 1M $0.150 / 1M
आउटपुट कीमत $2.500 / 1M $0.600 / 1M
कुल इनपुट टोकन 35,926 41,748
आउटपुट टोकन 1,770 3,894
रीजनिंग टोकन 0 91,773
प्रतिक्रिया समय (औसत) 875ms 11.02s
प्रतिक्रिया समय (अधिकतम) 4.39s 104.98s
प्रतिक्रिया समय (कुल) 18.37s 231.37s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#114 Gemini 2.5 Flash

none
अमान्य SVG
लागत
$0.164
समय
215.5s
टोकन
65,659 tok

#110 KAT-Coder-Air V2.5

high
अमान्य SVG
लागत
$0.000
समय
300.0s
टोकन
0 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Gemini 2.5 Flash 5.5 10.0 33.3% 0 736ms 8,122 483 0
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883

त्वरित तुलना

तुलना जोड़ी बदलें