Navigation
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs StepFun: Step 3.5 Flash

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-04-16

Métrique Claude Sonnet 4.6 Claude Sonnet 4.6 none Sortie: 2026-02-17 Step 3.5 Flash Step 3.5 Flash medium Sortie: 2026-02-01
Score 7.4 7.9
Rang #41 #30
Cohérence 9.6 9.1
Tests corrects
Taux de réussite par tentative 64.8% 70.6%
Tests instables 1 2
Exécutions totales 54 49
Coût par résultat 2.376 0.000
Coût total $0.262 $0.000
Prix d'entrée $3.000 / 1M $0.100 / 1M
Prix de sortie $15.000 / 1M $0.300 / 1M
Jetons de sortie 7,433 71,904
Jetons de raisonnement 0 155,607
Temps de réponse (moy.) 4.98s 26.78s
Temps de réponse (max) 23.84s 170.45s
Temps de réponse (total) 54.83s 294.58s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 4.8 10.0 25.0% 0 2.94s 1,214 0
Step 3.5 Flash 10.0 10.0 100.0% 0 13.56s 14,376 17,668
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 10.0 10.0 100.0% 0 3.67s 523 0
Step 3.5 Flash - - - - - - - -
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 9.5 10.0 100.0% 0 23.84s 3,766 0
Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 1,176 12,984
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 10.0 10.0 100.0% 0 3.43s 252 0
Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 600 13,886
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 7.7 10.0 66.7% 0 3.54s 413 0
Step 3.5 Flash 5.3 7.2 44.4% 1 170.45s 45,350 90,436
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 6.1 3.1 66.7% 1 2.56s 192 0
Step 3.5 Flash 5.5 10.0 0.0% 0 6.54s 2,214 2,584
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 6.5 10.0 50.0% 0 1.96s 90 0
Step 3.5 Flash 8.5 6.8 83.3% 1 4.98s 2,284 3,412
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 7.7 10.0 66.7% 0 2.92s 536 0
Step 3.5 Flash 5.3 10.0 33.3% 0 7.72s 5,629 10,835
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 10.0 10.0 100.0% 0 4.11s 447 0
Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 275 3,802

Comparaison rapide

Changer la paire de comparaison