सूचनांचे पालन मॉडेल क्रमवारी | AI BENCHY

AI BENCHY श्रेणी

सूचनांचे पालन मध्ये कोणती AI मॉडेल्स सर्वोत्तम काम करतात, कोणती विश्वासार्ह राहतात आणि सर्वात मोठी दरी कुठे दिसते ते पाहा. क्रम लावा: बरोबर चाचण्या ↑.

दाखवलेली मॉडेल्स

15

सरासरी सूचनांचे पालन स्कोअर

8.5

सर्वोत्तम मॉडेल

MiniMax M2.7 3.8

अयशस्वी होण्याची कारणे

अयशस्वी होण्याचे कारण चुकीचे उत्तर सह53 अयशस्वी होण्याचे कारण सूचनांचे पालन केले नाही सह11 अयशस्वी होण्याचे कारण अतिरिक्त फॉरमॅटिंग सह2 अयशस्वी होण्याचे कारण उत्तर नाही सह2 अयशस्वी होण्याचे कारण API त्रुटी सह1

क्रमांक	मॉडेल	कंपनी	सूचनांचे पालन स्कोअर	स्कोअर	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)
#43	MiMo-V2.5-Pro medium	Xiaomi	9.9	7.5	2/2	2.77s
#44	Gemini 3.1 Flash Lite medium	Google	9.9	7.5	2/2	2.59s
#45	GPT-5.4 Mini medium	OpenAI	9.8	7.5	2/2	2.13s
#46	Qwen3.6 35B A3B medium	Qwen	10.0	7.4	2/2	7.50s
#47	Grok Build 0.1 medium	X AI	9.8	7.4	2/2	12.4s
#49	Qwen3.5-Flash medium	Qwen	10.0	7.4	2/2	63.5s
#50	Gemini 3.1 Flash Lite Preview low	Google	10.0	7.4	2/2	1.49s
#51	Mimo V2 PRO medium	Xiaomi	9.9	7.4	2/2	3.36s
#52	Claude Sonnet 4.6 medium	Anthropic	10.0	7.4	2/2	2.61s
#54	GPT-5 Mini medium	OpenAI	10.0	7.3	2/2	11.6s
#56	MiMo-V2.5 medium	Xiaomi	9.9	7.3	2/2	1.80s
#57	Step 3.7 Flash low	Stepfun	9.8	7.3	2/2	1.58s
#58	Gemini 3.1 Flash Lite Preview none	Google	10.0	7.2	2/2	1.13s
#59	GLM 5V Turbo medium	Z.ai	9.9	7.2	2/2	3.74s
#60	Kimi K2.6 medium	Moonshot AI	10.0	7.2	2/2	12.5s

सूचनांचे पालन स्कोअर नुसार शीर्ष मॉडेल्स

सूचनांचे पालन स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी) नुसार शीर्ष मॉडेल्स