Classement Spécifique au domaine x Mauvaise réponse

Voyez quels modèles d'IA ont le plus de chances de rencontrer Mauvaise réponse sur Spécifique au domaine, pour repérer plus vite les points faibles.

Modèles affichés

Échecs totaux

878

Modèle le plus touché

Claude Opus 5 3

Raisons d'échec

Mauvaise réponse878 Aucune réponse63 Délai dépassé46 Erreur API40 Mise en forme supplémentaire36 N'a pas suivi les instructions3

Catégories

Spécifique au domaine878 Astuces anti-IA502 Programmation477 Résolution d'énigmes344 Culture générale306 Intelligence générale129 Combiné126 Tâches agentiques126 Suivi des instructions111 Analyse et extraction des données93

414/414

Rang	Modèle	Entreprise	Nombre de Mauvaise réponse	Score de catégorie	Coût total	Tests corrects	Temps de réponse (moy.)
#419	Span-02 default	Respan	2	0.5	$0.001	1/3	1.24s
Tests totaux 3 Tests incorrects 2 Coût total $0.001 Temps de réponse (moy.) 1.24s
#420	Nemotron 3 Nano Omni 30b A3b Reasoning medium	NVIDIA	2	0.3	$0.000	0/3	56.7s
Tests totaux 3 Tests incorrects 3 Coût total $0.000 Temps de réponse (moy.) 56.7s
#421	d1-ultra default	Liquid	2	0.5	$0.003	1/3	576ms
Tests totaux 3 Tests incorrects 2 Coût total $0.003 Temps de réponse (moy.) 576ms
#425	Decider V1.1 27B default	Perplexity	2	0.5	$0.002	1/3	313ms
Tests totaux 3 Tests incorrects 2 Coût total $0.002 Temps de réponse (moy.) 313ms
#426	Drex v1.5 default	Nace AI	2	0.5	$0.002	1/3	1.09s
Tests totaux 3 Tests incorrects 2 Coût total $0.002 Temps de réponse (moy.) 1.09s
#427	GPT-6 Luna Decisions default	OpenAI	2	0.5	$0.005	1/3	554ms
Tests totaux 3 Tests incorrects 2 Coût total $0.005 Temps de réponse (moy.) 554ms
#428	Kev 4B default	Jaredpalmer	2	0.5	$0.002	1/3	6.34s
Tests totaux 3 Tests incorrects 2 Coût total $0.002 Temps de réponse (moy.) 6.34s
#430	Classify-1 default	Scaledown	2	0.5	$0.008	1/3	1.54s
Tests totaux 3 Tests incorrects 2 Coût total $0.008 Temps de réponse (moy.) 1.54s
#432	Decider Flash V1.2 default	Perplexity	2	0.5	$0.001	1/3	527ms
Tests totaux 3 Tests incorrects 2 Coût total $0.001 Temps de réponse (moy.) 527ms
#441	Nimble v3 9B default	Bespoke Labs	2	0.2	~$0.001	0/2	80ms
Tests totaux 2 Tests incorrects 2 Coût total ~$0.001 Temps de réponse (moy.) 80ms
#1	Gemini 3.6 Flash high	Google	1	0.8	$0.900	2/3	33.3s
Tests totaux 3 Tests incorrects 1 Coût total $0.900 Temps de réponse (moy.) 33.3s
#3	GPT-6 Sol high	OpenAI	1	0.8	$0.921	2/3	62.9s
Tests totaux 3 Tests incorrects 1 Coût total $0.921 Temps de réponse (moy.) 62.9s
#6	GPT-6.1 Sol xhigh	OpenAI	1	0.8	$1.377	2/3	177.3s
Tests totaux 3 Tests incorrects 1 Coût total $1.377 Temps de réponse (moy.) 177.3s
#7	GPT-6 Astra high	OpenAI	1	0.8	$4.458	2/3	95.1s
Tests totaux 3 Tests incorrects 1 Coût total $4.458 Temps de réponse (moy.) 95.1s
#8	GPT-6 Astra xhigh	OpenAI	1	0.8	$6.213	2/3	147.0s
Tests totaux 3 Tests incorrects 1 Coût total $6.213 Temps de réponse (moy.) 147.0s

Filtrer les modèles

Meilleurs modèles par Nombre de Mauvaise réponse

Nombre de Mauvaise réponse vs Score

Meilleurs modèles par Temps de réponse (moy.)

Meilleurs modèles par Coût gaspillé estimé

Spécifique au domaine : Mauvaise réponse

Filtrer les modèles

Meilleurs modèles par Nombre de Mauvaise réponse

Nombre de Mauvaise réponse vs Score

Meilleurs modèles par Temps de réponse (moy.)

Meilleurs modèles par Coût gaspillé estiméEstimation de l’électricité consommée par le GPU uniquement. Le reste de l’ordinateur et l’achat du matériel ne sont pas inclus. NVIDIA GeForce RTX 3090: 0.0021 h × 0.377 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.000263.

Meilleurs modèles par Coût gaspillé estimé