Classement Programmation x Erreur API

Échecs par catégorie AI BENCHY

Voyez quels modèles d'IA ont le plus de chances de rencontrer Erreur API sur Programmation, pour repérer plus vite les points faibles.

Modèles affichés

Échecs totaux

Modèle le plus touché

Raisons d'échec

Mauvaise réponse26 Délai dépassé12 Erreur API6 N'a pas suivi les instructions2

Catégories

Analyse et extraction des données6 Appel d'outils6 Programmation6 Combiné5 Spécifique au domaine2 Résolution d'énigmes1 Suivi des instructions1

Rang	Modèle	Entreprise	Nombre de Erreur API	Score de catégorie	Tests corrects	Temps de réponse (moy.)
#10	Gemini 3 PRO Preview medium	Google	1	3.0	0/1	0ms
#18	Qwen3.6 Plus medium	Qwen	1	3.0	0/1	0ms
#47	Hunter Alpha medium	OpenRouter	1	3.0	0/1	0ms
#48	Nemotron 3 Super medium	NVIDIA	1	3.0	0/1	0ms
#68	Hunter Alpha none	OpenRouter	1	3.0	0/1	0ms
#93	Step 3.5 Flash none	Stepfun	1	3.0	0/1	0ms

Meilleurs modèles par Nombre de Erreur API