कोडिंग मॉडेल क्रमवारी

कोडिंग मध्ये कोणती AI मॉडेल्स सर्वोत्तम काम करतात, कोणती विश्वासार्ह राहतात आणि सर्वात मोठी दरी कुठे दिसते ते पाहा. क्रम लावा: मेट्रिक ↑.

दाखवलेली मॉडेल्स

सरासरी कोडिंग स्कोअर

0.6

सर्वोत्तम मॉडेल

Gemini 3.1 Flash Lite Preview 0.0

अयशस्वी होण्याची कारणे

अयशस्वी होण्याचे कारण चुकीचे उत्तर सह456 अयशस्वी होण्याचे कारण API त्रुटी सह64 अयशस्वी होण्याचे कारण उत्तर नाही सह47 अयशस्वी होण्याचे कारण सूचनांचे पालन केले नाही सह44 अयशस्वी होण्याचे कारण अतिरिक्त फॉरमॅटिंग सह36 अयशस्वी होण्याचे कारण वेळ संपला सह24

408/408

क्रमांक	मॉडेल	कंपनी	कोडिंग स्कोअर	स्कोअर	एकूण खर्च	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)
#231	Qwen3.5 Plus 2026-02-15 none	Qwen	0.4	0.6	$0.176	0/3	2.05s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.176 प्रतिसाद वेळ (सरासरी) 2.05s
#388	MiMo-V2-Flash default	Xiaomi	0.4	0.3	$0.025	0/3	2.64s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.025 प्रतिसाद वेळ (सरासरी) 2.64s
#176	Gemma 4 31B medium	Google	0.4	0.7	$0.144	0/3	219.8s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.144 प्रतिसाद वेळ (सरासरी) 219.8s
#253	Apodex 1.1 Mini medium	Apodex	0.4	0.6	$0.000	0/3	51.0s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.000 प्रतिसाद वेळ (सरासरी) 51.0s
#242	DeepSeek V4 Flash 0731 none	DeepSeek	0.4	0.6	$0.053	0/3	1.72s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.053 प्रतिसाद वेळ (सरासरी) 1.72s
#335	GLM 4.7 Flash none	Z.ai	0.4	0.5	$0.027	0/3	2.54s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.027 प्रतिसाद वेळ (सरासरी) 2.54s
#309	KAT Coder AIR V2.5 high	Kwaipilot	0.4	0.5	$0.077	0/3	39.1s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.077 प्रतिसाद वेळ (सरासरी) 39.1s
#304	Laguna XS 2.1 none	Poolside	0.4	0.5	$0.020	0/3	623ms
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.020 प्रतिसाद वेळ (सरासरी) 623ms
#316	MiMo-V2.5-Pro none	Xiaomi	0.4	0.5	$0.135	0/3	1.41s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.135 प्रतिसाद वेळ (सरासरी) 1.41s
#354	Mimo V2 Omni default	Xiaomi	0.4	0.4	$0.021	0/3	2.75s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.021 प्रतिसाद वेळ (सरासरी) 2.75s
#308	Nemotron 3.5 Lightning high	NVIDIA	0.4	0.5	$0.168	0/3	168.4s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.168 प्रतिसाद वेळ (सरासरी) 168.4s
#312	Mistral Small 4 medium	Mistral	0.4	0.5	$0.126	0/3	40.0s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.126 प्रतिसाद वेळ (सरासरी) 40.0s
#337	Nemotron 3.5 Lightning medium	NVIDIA	0.4	0.5	$0.195	0/3	285.5s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.195 प्रतिसाद वेळ (सरासरी) 285.5s
#248	Inkling none	Thinkingmachines	0.4	0.6	$0.292	0/3	1.01s
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.292 प्रतिसाद वेळ (सरासरी) 1.01s
#374	Granite 4.1 8b default	IBM Granite	0.4	0.4	$0.007	0/3	775ms
एकूण चाचण्या 3 चुकीच्या चाचण्या 3 एकूण खर्च $0.007 प्रतिसाद वेळ (सरासरी) 775ms

कोडिंग क्रमवारी

मॉडेल फिल्टर करा

कोडिंग स्कोअर नुसार शीर्ष मॉडेल्स

कोडिंग स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी) नुसार शीर्ष मॉडेल्स