Classement Programmation x Mauvaise réponse

Échecs par catégorie AI BENCHY

Voyez quels modèles d'IA ont le plus de chances de rencontrer Mauvaise réponse sur Programmation, pour repérer plus vite les points faibles.

Modèles affichés

Échecs totaux

120

Modèle le plus touché

Raisons d'échec

Mauvaise réponse120 Aucune réponse18 N'a pas suivi les instructions16 Délai dépassé12 Mise en forme supplémentaire7 Erreur API6

Catégories

Spécifique au domaine298 Astuces anti-IA235 Résolution d'énigmes148 Culture générale127 Programmation120 Suivi des instructions52 Combiné51 Analyse et extraction des données32 Intelligence générale27 Appel d'outils2

Rang	Modèle	Entreprise	Nombre de Mauvaise réponse	Score de catégorie	Tests corrects	Temps de réponse (moy.)
#137	Qwen3.6 35B A3B none	Qwen	1	6.8	1/2	12.3s
#139	MiMo-V2.5 none	Xiaomi	1	6.8	1/2	3.74s
#140	Trinity Large Preview none	Arcee AI	1	4.9	0/1	14.3s
#141	Qwen3 Coder Next medium	Qwen	1	4.1	0/2	1.17s
#144	Hy3 preview none	Tencent	1	2.3	0/1	4.56s
#146	Ling-2.6-1T none	Inclusionai	1	5.5	0/1	10.6s
#149	MiMo-V2-Flash none	Xiaomi	1	4.9	0/2	2.04s
#150	Grok 4.1 Fast none	X AI	1	5.3	0/1	1.79s
#153	Granite 4.1 8B none	IBM Granite	1	5.2	0/2	706ms

←

1 2 3 4 5 6 7

Meilleurs modèles par Nombre de Mauvaise réponse