Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Opus 4.8 vs Qwen: Qwen3.5-27B

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-06-02

Métrique Claude Opus 4.8 Claude Opus 4.8 none Sortie: 2026-05-28 Qwen3.5-27B Qwen3.5-27B medium Sortie: 2026-02-24
Score 7.3 7.9
Rang #66 #27
Fiabilité 10.0 10.0
Cohérence 9.2 8.9
Tests corrects
Taux de réussite par tentative 65.0% 73.3%
Tests instables 2 3
Exécutions totales 60 60
Coût par résultat 4.324 4.532
Coût total $0.519 $0.488
Prix d'entrée $5.000 / 1M $0.195 / 1M
Prix de sortie $25.000 / 1M $1.560 / 1M
Total des jetons d'entrée 63,282 39,329
Jetons de sortie 8,098 2,569
Jetons de raisonnement 0 304,894
Temps de réponse (moy.) 3.51s 60.09s
Temps de réponse (max) 17.73s 177.36s
Temps de réponse (total) 70.19s 1201.89s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 6.5 10.0 50.0% 0 3.40s 834 1,472 0
Qwen3.5-27B 8.7 7.9 91.7% 1 19.75s 672 569 31,505
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 6.8 10.0 50.0% 0 3.59s 6,768 1,323 0
Qwen3.5-27B 7.0 9.8 50.0% 0 123.86s 5,060 416 64,993
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 9.5 10.0 100.0% 0 17.73s 29,658 3,259 0
Qwen3.5-27B 10.0 10.0 100.0% 0 163.96s 14,946 483 9,991
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 7.3 5.8 83.3% 1 1.77s 10,503 308 0
Qwen3.5-27B 10.0 10.0 100.0% 0 30.26s 7,782 270 16,150
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 5.3 7.2 44.4% 1 1.66s 975 61 0
Qwen3.5-27B 5.3 10.0 33.3% 0 79.53s 553 43 52,368
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 10.0 10.0 100.0% 0 3.48s 708 230 0
Qwen3.5-27B 6.1 3.1 66.7% 1 101.41s 524 70 23,147
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 9.9 10.0 100.0% 0 1.37s 909 95 0
Qwen3.5-27B 10.0 10.0 100.0% 0 19.66s 699 97 11,638
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 7.7 10.0 66.7% 0 2.74s 894 783 0
Qwen3.5-27B 8.2 7.7 77.8% 1 59.60s 696 242 70,096
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 10.0 10.0 100.0% 0 5.35s 11,775 355 0
Qwen3.5-27B 10.0 10.0 100.0% 0 7.45s 8,193 348 1,323
Culture générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Opus 4.8 3.0 10.0 0.0% 0 3.41s 258 212 0
Qwen3.5-27B 3.0 10.0 0.0% 0 85.11s 204 31 23,683

Comparaison rapide

Changer la paire de comparaison