AI BENCHY
Advertise here

Kushindwa kwa AI BENCHY

Kushindwa kwa Hakufuata maelekezo

Ona ni modeli gani za AI hukutana na Hakufuata maelekezo mara nyingi zaidi ili utambue hatari za utegemevu kabla ya kuchagua. Panga kwa: Idadi ya kushindwa ↑.

Modeli zilizoonyeshwa

15

Jumla ya kushindwa

215

Modeli iliyoathirika zaidi

Gemini 3.5 Flash 1

Kategoria

Katika kategoria Utatuzi wa mafumbo78 Katika kategoria Akili ya jumla74 Katika kategoria Mbinu za kupinga AI30 Katika kategoria Uandishi wa msimbo14 Katika kategoria Ufuataji wa maagizo11 Katika kategoria Mwito wa zana6 Katika kategoria Mahususi kwa domeni1 Katika kategoria Mchanganyiko1
Nafasi Modeli Kampuni Idadi ya Hakufuata maelekezo Alama Majaribio sahihi Muda wa majibu (wastani)
#147 GPT-4o-mini none OpenAI 1 4.8 5/21 1.77s
#149 Nemotron 3 Nano Omni 30b A3b Reasoning medium NVIDIA 1 4.6 4/19 17.1s
#155 Mercury 2 none Inception 1 4.5 4/21 653ms
#160 LFM2-24B-A2B none Liquid 1 4.2 2/16 782ms
#161 Qwen3.5-9B medium Qwen 1 4.2 3/21 82.2s
#15 GPT-5.3-Codex medium OpenAI 2 8.4 15/21 16.2s
#19 Seed-2.0-Lite medium Bytedance Seed 2 8.2 14/21 47.1s
#21 GPT-5.4 medium OpenAI 2 8.0 14/21 22.3s
#30 Qwen3.5-27B medium Qwen 2 7.8 13/21 68.4s
#31 DeepSeek V4 Flash high DeepSeek 2 7.7 13/21 45.8s
#38 Grok 4.3 medium X AI 2 7.6 13/21 47.5s
#43 MiMo-V2.5-Pro medium Xiaomi 2 7.5 12/21 26.1s
#58 Gemini 3.1 Flash Lite Preview none Google 2 7.2 12/21 1.21s
#60 Kimi K2.6 medium Moonshot AI 2 7.2 12/21 71.7s
#63 GPT-5.3 Chat none OpenAI 2 7.2 12/21 6.34s

Modeli bora kwa Idadi ya Hakufuata maelekezo

Idadi ya Hakufuata maelekezo dhidi ya Alama

Modeli bora kwa Muda wa majibu (wastani)