Navigatie
AI BENCHY
Your ad here

AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs StepFun: Step 3.5 Flash

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-03-12

Metriek Seed-2.0-Lite Seed-2.0-Lite medium Releasedatum: 2026-02-14 Step 3.5 Flash Step 3.5 Flash medium Releasedatum: 2026-02-01 Gratis beschikbaar
Rang #3 #14
Gem. score 8.5 7.4
Consistentie 8.7 9.1
Kosten per resultaat 0.870 0.000
Totale kosten $0.105 $0.000
Correcte tests
Slaagpercentage per poging 87.5% 68.8%
Instabiele tests 3 2
Totaal runs 48 48
Uitvoer-tokens 2,815 71,452
Redeneer-tokens 44,618 155,147
Responstijd (gem.) 29.39s 29.10s
Responstijd (max) 168.71s 170.45s
Responstijd (totaal) 470.29s 290.96s

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Gem. score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Gem. score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Anti-AI-trucs Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Seed-2.0-Lite 10.0 10.0 100.0% 0 23.34s 990 7,037
Step 3.5 Flash 10.0 10.0 100.0% 0 18.54s 13,924 17,208
Gecombineerd Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Seed-2.0-Lite 10.0 10.0 100.0% 0 37.67s 506 4,299
Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 1,176 12,984
Gegevensparsering en extractie Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Seed-2.0-Lite 9.9 10.0 100.0% 0 9.07s 246 1,742
Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 600 13,886
Domeinspecifiek Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Seed-2.0-Lite 4.0 7.2 55.6% 1 88.74s 15 23,897
Step 3.5 Flash 4.0 7.2 44.4% 1 170.45s 45,350 90,436
Algemene intelligentie Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Seed-2.0-Lite 7.0 3.6 66.7% 1 18.25s 304 1,620
Step 3.5 Flash 6.0 10.0 0.0% 0 6.54s 2,214 2,584
Instructies opvolgen Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Seed-2.0-Lite 10.0 10.0 100.0% 0 7.26s 71 1,480
Step 3.5 Flash 9.0 6.8 83.3% 1 4.98s 2,284 3,412
Puzzle Solving Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Seed-2.0-Lite 9.3 7.9 88.9% 1 11.03s 461 3,532
Step 3.5 Flash 4.0 10.0 33.3% 0 7.72s 5,629 10,835
Toolaanroepen Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Seed-2.0-Lite 10.0 10.0 100.0% 0 12.38s 222 1,011
Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 275 3,802

Snelle vergelijking

Vergelijkingspaar wisselen