Navigatie
AI BENCHY
Vergelijken Grafieken Methodologie
โค๏ธ Made by XCS
Your ad here

AI BENCHY Compare

OpenAI: GPT-5.4 vs Qwen: Qwen3.5-27B

Vergelijken:

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-03-06

Metriek OpenAI: GPT-5.4 medium Releasedatum: 2026-03-05 Qwen: Qwen3.5-27B medium Releasedatum: 2026-02-24
Gem. score 8.2 8.5
Rang #7 #5
Correcte tests
Consistentie 8.9 9.5
Kosten per resultaat 6.533 3.283
Totale kosten $0.784 $0.394
Slaagpercentage per poging 86.7% 82.2%
Instabiele tests 2 1
common.totalRuns 45 (15 x 3) 45 (15 x 3)
Uitvoer-tokens 1,611 1,588
Redeneer-tokens 46,321 177,639
Responstijd (gem.) 21.06s 48.85s
Responstijd (max) 100.41s 163.96s
Responstijd (totaal) 315.95s 732.75s

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Gem. score vs Responstijd (gem.)

Categorie-uitsplitsing

Anti-AI-trucs Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
OpenAI: GPT-5.4 10.0 10.0 100.0% 0 5.02s 216 1,466
Qwen: Qwen3.5-27B 10.0 10.0 100.0% 0 9.69s 102 8,956
Gecombineerd Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
OpenAI: GPT-5.4 10.0 10.0 100.0% 0 20.57s 301 3,543
Qwen: Qwen3.5-27B 10.0 10.0 100.0% 0 163.96s 483 9,991
Gegevensparsering en extractie Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
OpenAI: GPT-5.4 9.9 10.0 100.0% 0 5.32s 234 804
Qwen: Qwen3.5-27B 9.9 10.0 100.0% 0 30.26s 270 16,150
Domeinspecifiek Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
OpenAI: GPT-5.4 4.0 7.2 44.4% 1 74.27s 61 34,748
Qwen: Qwen3.5-27B 4.0 10.0 33.3% 0 79.53s 43 52,368
Instructies opvolgen Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
OpenAI: GPT-5.4 10.0 10.0 100.0% 0 3.11s 93 897
Qwen: Qwen3.5-27B 10.0 10.0 100.0% 0 19.66s 97 11,638
Puzzle Solving Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
OpenAI: GPT-5.4 7.0 7.2 88.9% 1 9.13s 442 3,832
Qwen: Qwen3.5-27B 8.3 7.7 77.8% 1 64.61s 245 77,213
Toolaanroepen Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
OpenAI: GPT-5.4 10.0 10.0 100.0% 0 13.28s 264 1,031
Qwen: Qwen3.5-27B 10.0 10.0 100.0% 0 7.45s 348 1,323

Snelle vergelijking

Vergelijkingspaar wisselen