नेव्हिगेशन
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemma 4 31B vs Kwaipilot: KAT-Coder-Air V2.5

सारांश

Gemma 4 31B (medium) average score मध्ये पुढे आहे: 6.3 vs 6.2. Gemma 4 31B (medium) चा benchmark खर्च कमी आहे: $0.032 vs $0.064. KAT-Coder-Air V2.5 (high) वेगवान आहे: 11.02s vs 56.55s, pass rates 69.8% vs 46.0%.

शिफारस केलेले मॉडेलGemma 4 31B (medium)It has the best score here (6.3), while costing about 2.0x less than KAT-Coder-Air V2.5 (high).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-14

मेट्रिक Gemma 4 31B Gemma 4 31B medium प्रकाशन: 2026-04-02 मोफत उपलब्ध KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high प्रकाशन: 2026-07-14
स्कोअर 6.3 6.2
क्रमांक #107 #110
विश्वसनीयता 10.0 9.7
सुसंगतता 9.4 7.6
बरोबर चाचण्या
प्रति प्रयत्न पास दर 69.8% 46.0%
अस्थिर चाचण्या 1 6
एकूण रन 63 63
प्रति निकाल खर्च 0.257 0.910
एकूण खर्च $0.032 $0.064
इनपुट किंमत $0.060 / 1M $0.150 / 1M
आउटपुट किंमत $0.350 / 1M $0.600 / 1M
एकूण इनपुट टोकन्स 17,957 41,748
आउटपुट टोकन्स 22,356 3,894
रिझनिंग टोकन्स 65,726 91,773
प्रतिसाद वेळ (सरासरी) 56.55s 11.02s
प्रतिसाद वेळ (कमाल) 437.40s 104.98s
प्रतिसाद वेळ (एकूण) 1074.41s 231.37s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#107 Gemma 4 31B

medium
खर्च
$0.002
वेळ
45.7s
टोकन्स
2,696 tok

#110 KAT-Coder-Air V2.5

high
अवैध SVG
खर्च
$0.000
वेळ
300.0s
टोकन्स
0 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Gemma 4 31B 4.3 5.8 22.2% 1 219.76s 5,568 11,098 33,212
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883

झटपट तुलना

तुलना जोडी बदला