नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.1 Flash Lite vs Kwaipilot: KAT-Coder-Pro V2.5

सारांश

KAT-Coder-Pro V2.5 (low) average score मध्ये पुढे आहे: 8.0 vs 7.8. Gemini 3.1 Flash Lite (medium) चा benchmark खर्च कमी आहे: $0.071 vs $0.220. Gemini 3.1 Flash Lite (medium) वेगवान आहे: 3.23s vs 10.44s, pass rates 65.1% vs 71.4%.

शिफारस केलेले मॉडेलGemini 3.1 Flash Lite (medium)Its score stays close to the best score here (7.8 vs 8.0), while costing about 3.1x less than KAT-Coder-Pro V2.5 (low).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite medium प्रकाशन: 2026-05-08 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low प्रकाशन: 2026-07-14
स्कोअर 7.8 8.0
क्रमांक #44 #35
विश्वसनीयता 10.0 9.9
सुसंगतता 9.2 7.3
बरोबर चाचण्या
प्रति प्रयत्न पास दर 65.1% 71.4%
अस्थिर चाचण्या 2 7
एकूण रन 63 63
प्रति निकाल खर्च 0.539 1.991
एकूण खर्च $0.071 $0.220
इनपुट किंमत $0.250 / 1M $0.740 / 1M
आउटपुट किंमत $1.500 / 1M $2.960 / 1M
एकूण इनपुट टोकन्स 36,808 42,750
आउटपुट टोकन्स 2,254 2,167
रिझनिंग टोकन्स 38,300 61,133
प्रतिसाद वेळ (सरासरी) 3.23s 10.44s
प्रतिसाद वेळ (कमाल) 10.87s 51.34s
प्रतिसाद वेळ (एकूण) 67.80s 219.17s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#44 Gemini 3.1 Flash Lite

medium
खर्च
$0.003
वेळ
5.3s
टोकन्स
1,754 tok

#35 KAT-Coder-Pro V2.5

low
खर्च
$0.016
वेळ
47.6s
टोकन्स
5,182 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Gemini 3.1 Flash Lite 5.5 10.0 33.3% 0 3.81s 8,134 459 8,978
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

झटपट तुलना

तुलना जोडी बदला