Classement Programmation x Mauvaise réponse

Voyez quels modèles d'IA ont le plus de chances de rencontrer Mauvaise réponse sur Programmation, pour repérer plus vite les points faibles.

Modèles affichés

Échecs totaux

456

Modèle le plus touché

Qwen3.6 Flash 3

Raisons d'échec

Mauvaise réponse456 Erreur API64 Aucune réponse41 N'a pas suivi les instructions41 Mise en forme supplémentaire36 Délai dépassé24

Catégories

Spécifique au domaine811 Astuces anti-IA470 Programmation456 Résolution d'énigmes323 Culture générale289 Combiné121 Intelligence générale121 Tâches agentiques120 Suivi des instructions101 Analyse et extraction des données77

265/265

Rang	Modèle	Entreprise	Nombre de Mauvaise réponse	Score de catégorie	Coût total	Tests corrects	Temps de réponse (moy.)
#259	Gemini 3.1 Flash Lite none	Google	2	0.5	$0.069	1/3	938ms
Tests totaux 3 Tests incorrects 2 Coût total $0.069 Temps de réponse (moy.) 938ms
#260	Qwen3.6 Flash none	Qwen	2	0.5	$0.139	1/3	1.79s
Tests totaux 3 Tests incorrects 2 Coût total $0.139 Temps de réponse (moy.) 1.79s
#262	Nemotron 3 Ultra none	NVIDIA	2	0.5	$0.164	1/3	1.02s
Tests totaux 3 Tests incorrects 2 Coût total $0.164 Temps de réponse (moy.) 1.02s
#263	Qwen3.7 Flash none	Qwen	2	0.5	$0.028	1/3	1.55s
Tests totaux 3 Tests incorrects 2 Coût total $0.028 Temps de réponse (moy.) 1.55s
#264	Qwen3.8 Flash Next none	Qwen	2	0.5	~$0.011	1/3	1.64s
Tests totaux 3 Tests incorrects 2 Coût total ~$0.011 Temps de réponse (moy.) 1.64s
#265	GPT-5.6 Terra none	OpenAI	2	0.5	$0.377	1/3	1.00s
Tests totaux 3 Tests incorrects 2 Coût total $0.377 Temps de réponse (moy.) 1.00s
#267	Ling 3.0 Flash high	Inclusionai	2	0.7	$0.021	1/3	14.9s
Tests totaux 3 Tests incorrects 2 Coût total $0.021 Temps de réponse (moy.) 14.9s
#270	GPT-5 Nano medium	OpenAI	2	0.7	$0.159	1/3	41.6s
Tests totaux 3 Tests incorrects 2 Coût total $0.159 Temps de réponse (moy.) 41.6s
#271	GPT-5.4 Mini none	OpenAI	2	0.5	$0.170	1/3	913ms
Tests totaux 3 Tests incorrects 2 Coût total $0.170 Temps de réponse (moy.) 913ms
#275	Gemma 4 31B none	Google	2	0.5	$0.031	1/3	11.2s
Tests totaux 3 Tests incorrects 2 Coût total $0.031 Temps de réponse (moy.) 11.2s
#276	Space Bunny Alpha low	Stealth	2	0.6	$0.000	1/3	6.60s
Tests totaux 3 Tests incorrects 2 Coût total $0.000 Temps de réponse (moy.) 6.60s
#277	GPT-5.4 none	OpenAI	2	0.5	$0.690	1/3	1.62s
Tests totaux 3 Tests incorrects 2 Coût total $0.690 Temps de réponse (moy.) 1.62s
#278	Solar Pro 4 none	Upstage	2	0.5	$0.022	1/3	2.61s
Tests totaux 3 Tests incorrects 2 Coût total $0.022 Temps de réponse (moy.) 2.61s
#280	Qwen3.5-35B-A3B none	Qwen	2	0.5	$0.120	1/3	1.39s
Tests totaux 3 Tests incorrects 2 Coût total $0.120 Temps de réponse (moy.) 1.39s
#284	Gemini 2.5 Flash none	Google	2	0.5	$0.017	1/3	736ms
Tests totaux 3 Tests incorrects 2 Coût total $0.017 Temps de réponse (moy.) 736ms

Filtrer les modèles

Meilleurs modèles par Nombre de Mauvaise réponse

Nombre de Mauvaise réponse vs Score

Meilleurs modèles par Temps de réponse (moy.)

Meilleurs modèles par Coût gaspillé estimé

Programmation : Mauvaise réponse

Filtrer les modèles

Meilleurs modèles par Nombre de Mauvaise réponse

Nombre de Mauvaise réponse vs Score

Meilleurs modèles par Temps de réponse (moy.)

Meilleurs modèles par Coût gaspillé estiméEstimation de l’électricité consommée par le GPU uniquement. Le reste de l’ordinateur et l’achat du matériel ne sont pas inclus. NVIDIA GeForce RTX 3090: 0.1095 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.010823.

Meilleurs modèles par Coût gaspillé estimé