नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Google: Gemini 3.1 Flash Lite vs Kwaipilot: KAT-Coder-Air V2.5

सारांश

Gemini 3.1 Flash Lite average score में आगे है: 6.1 vs 6.0. Gemini 3.1 Flash Lite की benchmark लागत कम है: $0.013 vs $0.030. Gemini 3.1 Flash Lite तेज है: 1.06s vs 6.47s, pass rates 52.4% vs 46.0%.

अनुशंसित मॉडलGemini 3.1 Flash LiteIt has the best score here (6.1), while costing about 2.3x less than KAT-Coder-Air V2.5 (low).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite none रिलीज़: 2026-05-08 KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 low रिलीज़: 2026-07-14
स्कोर 6.1 6.0
रैंक #118 #124
विश्वसनीयता 10.0 9.7
संगति 8.6 7.6
सही परीक्षण
प्रति प्रयास पास दर 52.4% 46.0%
अस्थिर टेस्ट 4 6
कुल रन 63 63
प्रति परिणाम लागत 0.144 0.427
कुल लागत $0.013 $0.030
इनपुट कीमत $0.250 / 1M $0.150 / 1M
आउटपुट कीमत $1.500 / 1M $0.600 / 1M
कुल इनपुट टोकन 36,710 42,464
आउटपुट टोकन 2,484 4,227
रीजनिंग टोकन 0 34,864
प्रतिक्रिया समय (औसत) 1.06s 6.47s
प्रतिक्रिया समय (अधिकतम) 2.97s 25.49s
प्रतिक्रिया समय (कुल) 22.35s 135.80s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#118 Gemini 3.1 Flash Lite

none
लागत
$0.001
समय
4.5s
टोकन
727 tok

#124 KAT-Coder-Air V2.5

low
लागत
$0.004
समय
29.9s
टोकन
6,008 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Gemini 3.1 Flash Lite 5.5 10.0 33.3% 0 938ms 8,128 666 0
KAT-Coder-Air V2.5 3.5 7.3 11.1% 1 11.06s 7,893 2,001 13,623

त्वरित तुलना

तुलना जोड़ी बदलें