Navigatie
AI BENCHY
Advertise here

AI BENCHY Compare

OpenAI: GPT-5.4 vs Qwen: Qwen3.6 27B

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-06-03

Metriek GPT-5.4 GPT-5.4 none Releasedatum: 2026-03-05 Qwen3.6 27B Qwen3.6 27B medium Releasedatum: 2026-04-20
Score 5.6 6.6
Rang #121 #84
Betrouwbaarheid 10.0 10.0
Consistentie 9.1 8.1
Correcte tests
Slaagpercentage per poging 38.3% 58.3%
Instabiele tests 2 5
Totaal runs 60 60
Kosten per resultaat 1.644 3.017
Totale kosten $0.116 $0.380
Invoerprijs $2.500 / 1M $0.290 / 1M
Uitvoerprijs $15.000 / 1M $3.200 / 1M
Totaal aantal invoer-tokens 31,593 36,541
Uitvoer-tokens 2,402 12,981
Redeneer-tokens 0 105,822
Responstijd (gem.) 1.45s 57.79s
Responstijd (max) 2.95s 168.22s
Responstijd (totaal) 29.00s 1155.83s

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Anti-AI-trucs Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
GPT-5.4 3.2 8.0 8.3% 1 1.21s 606 406 0
Qwen3.6 27B 8.3 10.0 75.0% 0 12.62s 453 582 4,311
Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
GPT-5.4 6.8 10.0 50.0% 0 1.99s 4,686 501 0
Qwen3.6 27B 6.6 10.0 50.0% 0 165.39s 2,216 4,760 26,668
Gecombineerd Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
GPT-5.4 3.0 10.0 0.0% 0 2.89s 11,019 291 0
Qwen3.6 27B 7.0 3.7 66.7% 1 83.07s 15,104 2,088 14,689
Gegevensparsering en extractie Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
GPT-5.4 10.0 10.0 100.0% 0 1.04s 7,140 222 0
Qwen3.6 27B 3.5 1.4 50.0% 2 37.30s 7,778 568 9,404
Domeinspecifiek Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
GPT-5.4 5.3 7.2 44.4% 1 1.07s 723 50 0
Qwen3.6 27B 2.9 7.2 11.1% 1 73.38s 662 3,510 20,352
Algemene intelligentie Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
GPT-5.4 4.4 9.9 0.0% 0 1.78s 477 184 0
Qwen3.6 27B 6.5 3.4 66.7% 1 39.53s 516 81 3,045
Instructies opvolgen Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
GPT-5.4 6.5 10.0 50.0% 0 1.07s 660 81 0
Qwen3.6 27B 10.0 10.0 100.0% 0 37.96s 699 346 6,548
Puzzeloplossing Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
GPT-5.4 5.6 9.8 33.3% 0 1.44s 642 381 0
Qwen3.6 27B 7.7 10.0 66.7% 0 61.14s 696 255 12,044
Toolaanroepen Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
GPT-5.4 10.0 10.0 100.0% 0 2.75s 5,445 246 0
Qwen3.6 27B 10.0 10.0 100.0% 0 16.88s 8,213 390 2,954
Algemene kennis Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
GPT-5.4 3.0 10.0 0.0% 0 990ms 195 40 0
Qwen3.6 27B 3.0 10.0 0.0% 0 80.99s 204 401 5,807

Snelle vergelijking

Vergelijkingspaar wisselen