Classement Suivi des instructions x Mauvaise réponse

Voyez quels modèles d'IA ont le plus de chances de rencontrer Mauvaise réponse sur Suivi des instructions, pour repérer plus vite les points faibles.

Modèles affichés

Échecs totaux

111

Modèle le plus touché

Raisons d'échec

Mauvaise réponse111 N'a pas suivi les instructions73 Erreur API25 Mise en forme supplémentaire8 Délai dépassé5 Aucune réponse2

Catégories

Spécifique au domaine878 Astuces anti-IA502 Programmation477 Résolution d'énigmes344 Culture générale306 Intelligence générale129 Combiné126 Tâches agentiques126 Suivi des instructions111 Analyse et extraction des données93

111/111

Rang	Modèle	Entreprise	Nombre de Mauvaise réponse	Score de catégorie	Coût total	Tests corrects	Temps de réponse (moy.)
#434	D1 default	Liquid	1	0.2	$0.003	0/1	820ms
Tests totaux 1 Tests incorrects 1 Coût total $0.003 Temps de réponse (moy.) 820ms
#436	LFM2-24B-A2B default	Liquid	1	0.6	$0.001	1/2	752ms
Tests totaux 2 Tests incorrects 1 Coût total $0.001 Temps de réponse (moy.) 752ms
#437	Solar Decide Flash default	Upstage	1	0.2	$0.003	0/1	1.66s
Tests totaux 1 Tests incorrects 1 Coût total $0.003 Temps de réponse (moy.) 1.66s
#438	Microsoft-Decision-1 default	Microsoft	1	0.2	$0.002	0/1	997ms
Tests totaux 1 Tests incorrects 1 Coût total $0.002 Temps de réponse (moy.) 997ms
#440	Tev1 4B Experimental default	Togethercomputer	1	0.2	$0.002	0/1	555ms
Tests totaux 1 Tests incorrects 1 Coût total $0.002 Temps de réponse (moy.) 555ms
#441	Nimble v3 9B default	Bespoke Labs	1	0.2	~$0.001	0/1	469ms
Tests totaux 1 Tests incorrects 1 Coût total ~$0.001 Temps de réponse (moy.) 469ms

Filtrer les modèles