नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.1 Flash Lite vs Kwaipilot: KAT-Coder-Air V2.5

सारांश

average score जवळपास समान आहे: 6.1 vs 6.2. Gemini 3.1 Flash Lite (minimal) चा benchmark खर्च कमी आहे: $0.013 vs $0.045. Gemini 3.1 Flash Lite (minimal) वेगवान आहे: 1.33s vs 8.28s, pass rates 54.0% vs 47.6%.

शिफारस केलेले मॉडेलGemini 3.1 Flash Lite (minimal)It has the best score here (6.1), while costing about 3.5x less than KAT-Coder-Air V2.5 (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite minimal प्रकाशन: 2026-05-08 KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium प्रकाशन: 2026-07-14
स्कोअर 6.1 6.2
क्रमांक #116 #115
विश्वसनीयता 10.0 9.7
सुसंगतता 8.8 8.8
बरोबर चाचण्या
प्रति प्रयत्न पास दर 54.0% 47.6%
अस्थिर चाचण्या 3 3
एकूण रन 63 63
प्रति निकाल खर्च 0.130 0.562
एकूण खर्च $0.013 $0.045
इनपुट किंमत $0.250 / 1M $0.150 / 1M
आउटपुट किंमत $1.500 / 1M $0.600 / 1M
एकूण इनपुट टोकन्स 36,973 42,750
आउटपुट टोकन्स 2,487 7,759
रिझनिंग टोकन्स 0 56,357
प्रतिसाद वेळ (सरासरी) 1.33s 8.28s
प्रतिसाद वेळ (कमाल) 4.49s 48.19s
प्रतिसाद वेळ (एकूण) 27.91s 173.80s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#116 Gemini 3.1 Flash Lite

minimal
खर्च
$0.001
वेळ
3.7s
टोकन्स
635 tok

#115 KAT-Coder-Air V2.5

medium
खर्च
$0.003
वेळ
23.7s
टोकन्स
4,924 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Gemini 3.1 Flash Lite 5.5 10.0 33.3% 0 831ms 8,126 666 0
KAT-Coder-Air V2.5 3.6 7.0 22.2% 1 23.37s 7,893 5,199 29,973

झटपट तुलना

तुलना जोडी बदला