नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.1 Flash Lite Preview vs Kwaipilot: KAT-Coder-Pro V2.5

सारांश

KAT-Coder-Pro V2.5 (low) average score मध्ये पुढे आहे: 8.0 vs 7.8. Gemini 3.1 Flash Lite Preview (medium) चा benchmark खर्च कमी आहे: $0.068 vs $0.220. Gemini 3.1 Flash Lite Preview (medium) वेगवान आहे: 3.96s vs 10.44s, pass rates 61.9% vs 71.4%.

शिफारस केलेले मॉडेलGemini 3.1 Flash Lite Preview (medium)Its score stays close to the best score here (7.8 vs 8.0), while costing about 3.2x less than KAT-Coder-Pro V2.5 (low).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक Gemini 3.1 Flash Lite Preview Gemini 3.1 Flash Lite Preview medium प्रकाशन: 2026-03-03 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low प्रकाशन: 2026-07-14
स्कोअर 7.8 8.0
क्रमांक #42 #35
विश्वसनीयता 10.0 9.9
सुसंगतता 10.0 7.3
बरोबर चाचण्या
प्रति प्रयत्न पास दर 61.9% 71.4%
अस्थिर चाचण्या 0 7
एकूण रन 63 63
प्रति निकाल खर्च 0.523 1.991
एकूण खर्च $0.068 $0.220
इनपुट किंमत $0.250 / 1M $0.740 / 1M
आउटपुट किंमत $1.500 / 1M $2.960 / 1M
एकूण इनपुट टोकन्स 37,786 42,750
आउटपुट टोकन्स 2,210 2,167
रिझनिंग टोकन्स 36,744 61,133
प्रतिसाद वेळ (सरासरी) 3.96s 10.44s
प्रतिसाद वेळ (कमाल) 14.93s 51.34s
प्रतिसाद वेळ (एकूण) 83.06s 219.17s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#42 Gemini 3.1 Flash Lite Preview

medium
खर्च
$0.003
वेळ
5.2s
टोकन्स
1,944 tok

#35 KAT-Coder-Pro V2.5

low
खर्च
$0.016
वेळ
47.6s
टोकन्स
5,182 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Gemini 3.1 Flash Lite Preview 5.5 10.0 33.3% 0 4.09s 8,126 461 8,597
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

झटपट तुलना

तुलना जोडी बदला