Classement Spécifique au domaine x Mauvaise réponse

Voyez quels modèles d'IA ont le plus de chances de rencontrer Mauvaise réponse sur Spécifique au domaine, pour repérer plus vite les points faibles.

Modèles affichés

Échecs totaux

893

Modèle le plus touché

Claude Opus 5 3

Raisons d'échec

Mauvaise réponse893 Aucune réponse66 Délai dépassé46 Erreur API40 Mise en forme supplémentaire36 N'a pas suivi les instructions3

Catégories

Spécifique au domaine893 Astuces anti-IA519 Programmation484 Résolution d'énigmes352 Culture générale315 Intelligence générale134 Combiné128 Tâches agentiques128 Suivi des instructions117 Analyse et extraction des données93

423/423

Rang	Modèle	Entreprise	Nombre de Mauvaise réponse	Score de catégorie	Coût total	Tests corrects	Temps de réponse (moy.)
#142	Muse Wonder xhigh	Meta	2	0.4	$4.012	0/3	150.7s
Tests totaux 3 Tests incorrects 3 Coût total $4.012 Temps de réponse (moy.) 150.7s
#144	GPT-6 Luna low	OpenAI	2	0.5	$0.033	1/3	18.1s
Tests totaux 3 Tests incorrects 2 Coût total $0.033 Temps de réponse (moy.) 18.1s
#145	Qwen3.8 27B low	Qwen	2	0.5	~$0.089	1/3	60.8s
Tests totaux 3 Tests incorrects 2 Coût total ~$0.089 Temps de réponse (moy.) 60.8s
#150	Seed-2.0-Code high	Bytedance Seed	2	0.3	$1.448	0/3	419.7s
Tests totaux 3 Tests incorrects 3 Coût total $1.448 Temps de réponse (moy.) 419.7s
#154	Seed-2.0-Code medium	Bytedance Seed	2	0.5	$1.275	1/3	429.8s
Tests totaux 3 Tests incorrects 2 Coût total $1.275 Temps de réponse (moy.) 429.8s
#156	Grok 4.7 low	X AI	2	0.5	$1.933	1/3	159.1s
Tests totaux 3 Tests incorrects 2 Coût total $1.933 Temps de réponse (moy.) 159.1s
#157	Inkling Small high	Thinkingmachines	2	0.5	$0.398	1/3	56.3s
Tests totaux 3 Tests incorrects 2 Coût total $0.398 Temps de réponse (moy.) 56.3s
#159	Inkling medium	Thinkingmachines	2	0.5	$0.527	1/3	31.6s
Tests totaux 3 Tests incorrects 2 Coût total $0.527 Temps de réponse (moy.) 31.6s
#161	GLM 5.3 Flash high	Z.ai	2	0.3	$0.056	0/3	85.9s
Tests totaux 3 Tests incorrects 3 Coût total $0.056 Temps de réponse (moy.) 85.9s
#163	Grok 4.7 medium	X AI	2	0.5	$2.938	1/3	300.4s
Tests totaux 3 Tests incorrects 2 Coût total $2.938 Temps de réponse (moy.) 300.4s
#164	Gemini 2.5 Flash medium	Google	2	0.6	$0.680	1/3	37.1s
Tests totaux 3 Tests incorrects 2 Coût total $0.680 Temps de réponse (moy.) 37.1s
#165	LongCat 2.0 high	Meituan	2	0.4	$0.778	0/3	433.7s
Tests totaux 3 Tests incorrects 3 Coût total $0.778 Temps de réponse (moy.) 433.7s
#168	Qwen3.5-27B none	Qwen	2	0.5	$0.116	1/3	634ms
Tests totaux 3 Tests incorrects 2 Coût total $0.116 Temps de réponse (moy.) 634ms
#170	Qwen3.8 27B medium	Qwen	2	0.5	~$0.073	1/3	77.0s
Tests totaux 3 Tests incorrects 2 Coût total ~$0.073 Temps de réponse (moy.) 77.0s
#171	Gemini 3.8 Flash low	Google	2	0.6	$0.323	1/3	6.50s
Tests totaux 3 Tests incorrects 2 Coût total $0.323 Temps de réponse (moy.) 6.50s

Filtrer les modèles

Meilleurs modèles par Nombre de Mauvaise réponse

Nombre de Mauvaise réponse vs Score

Meilleurs modèles par Temps de réponse (moy.)

Meilleurs modèles par Coût gaspillé estimé

Spécifique au domaine : Mauvaise réponse

Filtrer les modèles

Meilleurs modèles par Nombre de Mauvaise réponse

Nombre de Mauvaise réponse vs Score

Meilleurs modèles par Temps de réponse (moy.)

Meilleurs modèles par Coût gaspillé estiméEstimation de l’électricité consommée par le GPU uniquement. Le reste de l’ordinateur et l’achat du matériel ne sont pas inclus. NVIDIA GeForce RTX 3090: 0.8932 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.088310.

Meilleurs modèles par Coût gaspillé estimé