नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

Google: Gemini 3 Flash Preview vs Kwaipilot: KAT-Coder-Pro V2.5

सारांश

KAT-Coder-Pro V2.5 (medium) average score में आगे है: 7.5 vs 7.4. Gemini 3 Flash Preview (low) की benchmark लागत कम है: $0.111 vs $0.275. Gemini 3 Flash Preview (low) तेज है: 5.76s vs 12.95s, pass rates 79.4% vs 65.1%.

अनुशंसित मॉडलGemini 3 Flash Preview (low)Its score stays close to the best score here (7.4 vs 7.5), while costing about 2.5x less than KAT-Coder-Pro V2.5 (medium).

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-14

मेट्रिक Gemini 3 Flash Preview Gemini 3 Flash Preview low रिलीज़: 2025-12-17 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium रिलीज़: 2026-07-14
स्कोर 7.4 7.5
रैंक #68 #60
विश्वसनीयता 10.0 10.0
संगति 9.2 7.7
सही परीक्षण
प्रति प्रयास पास दर 79.4% 65.1%
अस्थिर टेस्ट 2 6
कुल रन 63 63
प्रति परिणाम लागत 0.689 2.498
कुल लागत $0.111 $0.275
इनपुट कीमत $0.500 / 1M $0.740 / 1M
आउटपुट कीमत $3.000 / 1M $2.960 / 1M
कुल इनपुट टोकन 36,769 42,750
आउटपुट टोकन 2,076 2,098
रीजनिंग टोकन 28,518 80,027
प्रतिक्रिया समय (औसत) 5.76s 12.95s
प्रतिक्रिया समय (अधिकतम) 14.72s 81.45s
प्रतिक्रिया समय (कुल) 120.93s 271.92s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#68 Gemini 3 Flash Preview

low
लागत
$0.007
समय
12.1s
टोकन
2,289 tok

#60 KAT-Coder-Pro V2.5

medium
लागत
$0.009
समय
25.6s
टोकन
2,939 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
Gemini 3 Flash Preview 5.8 7.2 44.4% 1 6.00s 8,122 456 7,421
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658

त्वरित तुलना

तुलना जोड़ी बदलें