Navigare
Advertise here

Claude Sonnet 5.5 (medium) vs Step 3.7 Flash (high)

Scorul mediu este practic egal la 6.5 vs 6.6. Claude Sonnet 5.5 (medium) are costul de benchmark mai mic, $1.100 vs $1.350. Claude Sonnet 5.5 (medium) este mai rapid cu 8.03s vs 72.72s, cu rate de reușită de 40.6% vs 58.0%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-10-01

Modele comparate

Rang
#192
Total tokenuri de ieșire
37,748
Timp de răspuns (mediu)
8.03s
Cost total
$1.100
Rang
#190
Total tokenuri de ieșire
1,100,052
Timp de răspuns (mediu)
72.72s
Cost total
$1.350
Model recomandat Claude Sonnet 5.5 (medium)

Are cel mai bun scor aici (6.5) și răspunde de aproximativ 9.1x mai rapid decât Step 3.7 Flash (high).

Comparație detaliată

Metrică Claude Sonnet 5.5 Claude Sonnet 5.5 medium Lansare: 2026-09-29 Step 3.7 Flash Step 3.7 Flash high Lansare: 2026-05-29
Scor 6.5 6.6
Rang #192 #190
Fiabilitate 10.0 10.0
Consistență 9.7 8.5
Încercări 69/69 69/69
Teste corecte
Rată de trecere pe încercare 40.6% 58.0%
Teste instabile 1 4
Rulări totale 69 69
Cost per rezultat 12.221 12.267
Cost total $1.100 $1.350
Preț de intrare $2.000 / 1M $0.200 / 1M
Preț de ieșire $10.000 / 1M $1.150 / 1M
Total tokenuri de intrare 361,183 421,200
Tokenuri de ieșire 26,609 1,100,052
Tokenuri de raționament 11,139 0
Timp de răspuns (mediu) 8.03s 72.72s
Timp de răspuns (maxim) 51.18s 364.99s
Timp de răspuns (total) 184.80s 1672.53s
Parametri ~1T în total (~100B activi) 198B în total (11B activi)
Disponibilitate Închis Sursă deschisă

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#192 Claude Sonnet 5.5

medium
Cost
$0.024
Timp
17.4s
Tokenuri
2,525 tok

#190 Step 3.7 Flash

high
Cost
$0.007
Timp
63.6s
Tokenuri
6,030 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Claude Sonnet 5.5 3.4 9.7 0.0% 0 6.07s 10,608 6,767 0
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0

Comparație rapidă

Schimbă perechea de comparație