नेव्हिगेशन
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Google: Gemini 3 Flash Preview vs Kwaipilot: KAT-Coder-Pro V2.5

सारांश

KAT-Coder-Pro V2.5 (medium) average score मध्ये पुढे आहे: 7.5 vs 7.4. Gemini 3 Flash Preview (low) चा benchmark खर्च कमी आहे: $0.111 vs $0.275. Gemini 3 Flash Preview (low) वेगवान आहे: 5.76s vs 12.95s, pass rates 79.4% vs 65.1%.

शिफारस केलेले मॉडेलGemini 3 Flash Preview (low)Its score stays close to the best score here (7.4 vs 7.5), while costing about 2.5x less than KAT-Coder-Pro V2.5 (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक Gemini 3 Flash Preview Gemini 3 Flash Preview low प्रकाशन: 2025-12-17 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium प्रकाशन: 2026-07-14
स्कोअर 7.4 7.5
क्रमांक #68 #60
विश्वसनीयता 10.0 10.0
सुसंगतता 9.2 7.7
बरोबर चाचण्या
प्रति प्रयत्न पास दर 79.4% 65.1%
अस्थिर चाचण्या 2 6
एकूण रन 63 63
प्रति निकाल खर्च 0.689 2.498
एकूण खर्च $0.111 $0.275
इनपुट किंमत $0.500 / 1M $0.740 / 1M
आउटपुट किंमत $3.000 / 1M $2.960 / 1M
एकूण इनपुट टोकन्स 36,769 42,750
आउटपुट टोकन्स 2,076 2,098
रिझनिंग टोकन्स 28,518 80,027
प्रतिसाद वेळ (सरासरी) 5.76s 12.95s
प्रतिसाद वेळ (कमाल) 14.72s 81.45s
प्रतिसाद वेळ (एकूण) 120.93s 271.92s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#68 Gemini 3 Flash Preview

low
खर्च
$0.007
वेळ
12.1s
टोकन्स
2,289 tok

#60 KAT-Coder-Pro V2.5

medium
खर्च
$0.009
वेळ
25.6s
टोकन्स
2,939 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Gemini 3 Flash Preview 5.8 7.2 44.4% 1 6.00s 8,122 456 7,421
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658

झटपट तुलना

तुलना जोडी बदला