De gemiddelde score is vrijwel gelijk met 7.2 vs 7.2. Qwen3.8 27B (medium) heeft lagere benchmarkkosten met ~$0.073 vs $0.449. Step 3.7 Flash (low) is sneller met 20.72s vs 40.09s, met slagingspercentages van 66.7% vs 63.8%.
Benchmarks gegenereerd uit AI BENCHY-testsuites op:
2026-10-01
Vergeleken modellen
De antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
Rang
#141
Totaal aantal uitvoer-tokens
170,696
Responstijd (gem.)
40.09s
Totale kosten
~$0.073Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.7349 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.072660.
Rang
#147
Totaal aantal uitvoer-tokens
339,108
Responstijd (gem.)
20.72s
Totale kosten
$0.449
Aanbevolen modelQwen3.8 27B (medium)
Het heeft hier de beste score (7.2) en kost ongeveer 6.2x minder dan Step 3.7 Flash (low).
Gedetailleerde vergelijking
Metriek
Qwen3.8 27BQwen3.8 27BmediumDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.Releasedatum: 2026-08-14Gratis beschikbaar
Qwen3.8 27BQwen3.8 27BmediumDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.Releasedatum: 2026-08-14Gratis beschikbaar
9.7Succescore bij de eerste poging: 10.0 betekent geen herhaalbare doel-API- of snelheidslimietfouten vóór succesvolle calls; geregistreerde fouten verlagen de score.…
10.0Succescore bij de eerste poging: 10.0 betekent geen herhaalbare doel-API- of snelheidslimietfouten vóór succesvolle calls; geregistreerde fouten verlagen de score.…
Consistentie
9.4Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
7.9Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 9Ongeldige toolaanroep: 2Geen antwoord: 1Responstijd (gem.)20.72sResponstijd (max)124.75sResponstijd (totaal)476.67sEen test is alleen volledig geslaagd als alle runs slagen.…
Slaagpercentage per poging
66.7%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
63.8%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
Instabiele tests
2Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
6Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Totaal runs
69Totaal runs…
69Totaal runs…
Kosten per resultaat
~0.520Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.7349 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.072660.
4.078
Totale kosten
~$0.073Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.7349 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.072660.
$0.449
Invoerprijs
n.v.t.Invoerprijs…
$0.200 / 1MInvoerprijs…
Uitvoerprijs
n.v.t.Uitvoerprijs…
$1.150 / 1MUitvoerprijs…
Totaal aantal invoer-tokens
277,164Totaal aantal invoer-tokens…
292,685Totaal aantal invoer-tokens…
Uitvoer-tokens
1,913Uitvoer-tokens…
339,108Uitvoer-tokens…
Redeneer-tokens
168,783Redeneer-tokens…
0Redeneer-tokens…
Responstijd (gem.)
40.09sResponstijd (gem.)…
20.72sResponstijd (gem.)…
Responstijd (max)
214.63sResponstijd (max)…
124.75sResponstijd (max)…
Responstijd (totaal)
881.89sResponstijd (totaal)…
476.67sResponstijd (totaal)…
Parameters
27.3B
198B totaal (11B actief)
Beschikbaarheid
Gewichten beschikbaar
Open-source
Model generatie-showcase
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#141 Qwen3.8 27B
mediumDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
Kosten
~$0.002Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.0121 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.001193.
Tijd
43.4s
Tokens
2,956 tok
#147 Step 3.7 Flash
low
Ongeldige SVG
Kosten
$0.004
Tijd
25.3s
Tokens
3,072 tok
Rang
-
Kosten
-
Tijd
-
Tokens
-
Topmodellen op score
Score vs totale kosten
Responstijd (gem.)
Score vs Responstijd (gem.)
Totaal aantal uitvoer-tokens
Score vs Totaal aantal uitvoer-tokens
Categorie-uitsplitsing
Agenttaken
Score
Consistentie
Slaagpercentage per poging
Instabiele tests
Correcte tests
Responstijd (gem.)
Invoer-tokens
Uitvoer-tokens
Redeneer-tokens
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
4.7Gemiddelde score over alle benchmarktests.…
1.6Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
66.7%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)187.85sResponstijd (max)187.85sResponstijd (totaal)187.85sEen test is alleen volledig geslaagd als alle runs slagen.…
3.8Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
66.7%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Ongeldige toolaanroep: 1Responstijd (gem.)83.63sResponstijd (max)83.63sResponstijd (totaal)83.63sEen test is alleen volledig geslaagd als alle runs slagen.…
83.63sResponstijd (gem.)…
188,843Totaal aantal invoer-tokens…
18,715Uitvoer-tokens…
0Redeneer-tokens…
Anti-AI-trucs
Score
Consistentie
Slaagpercentage per poging
Instabiele tests
Correcte tests
Responstijd (gem.)
Invoer-tokens
Uitvoer-tokens
Redeneer-tokens
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
10.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
100.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen mislukte antwoorden.Responstijd (gem.)2.93sResponstijd (max)5.18sResponstijd (totaal)11.70sEen test is alleen volledig geslaagd als alle runs slagen.…
7.9Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
91.7%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)4.02sResponstijd (max)12.52sResponstijd (totaal)16.10sEen test is alleen volledig geslaagd als alle runs slagen.…
4.02sResponstijd (gem.)…
756Totaal aantal invoer-tokens…
10,896Uitvoer-tokens…
0Redeneer-tokens…
Programmeren
Score
Consistentie
Slaagpercentage per poging
Instabiele tests
Correcte tests
Responstijd (gem.)
Invoer-tokens
Uitvoer-tokens
Redeneer-tokens
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
10.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
100.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen mislukte antwoorden.Responstijd (gem.)40.50sResponstijd (max)72.14sResponstijd (totaal)121.51sEen test is alleen volledig geslaagd als alle runs slagen.…
7.2Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
88.9%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)9.46sResponstijd (max)12.69sResponstijd (totaal)28.38sEen test is alleen volledig geslaagd als alle runs slagen.…
9.46sResponstijd (gem.)…
7,437Totaal aantal invoer-tokens…
18,685Uitvoer-tokens…
0Redeneer-tokens…
Gecombineerd
Score
Consistentie
Slaagpercentage per poging
Instabiele tests
Correcte tests
Responstijd (gem.)
Invoer-tokens
Uitvoer-tokens
Redeneer-tokens
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
8.7Gemiddelde score over alle benchmarktests.…
6.9Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
83.3%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Ongeldige toolaanroep: 1Responstijd (gem.)124.48sResponstijd (max)214.63sResponstijd (totaal)248.96sEen test is alleen volledig geslaagd als alle runs slagen.…
5.8Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
83.3%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Ongeldige toolaanroep: 1Responstijd (gem.)66.18sResponstijd (max)124.39sResponstijd (totaal)132.37sEen test is alleen volledig geslaagd als alle runs slagen.…
66.18sResponstijd (gem.)…
77,415Totaal aantal invoer-tokens…
93,682Uitvoer-tokens…
0Redeneer-tokens…
Gegevensparsering en extractie
Score
Consistentie
Slaagpercentage per poging
Instabiele tests
Correcte tests
Responstijd (gem.)
Invoer-tokens
Uitvoer-tokens
Redeneer-tokens
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
6.5Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
50.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)8.76sResponstijd (max)10.36sResponstijd (totaal)17.53sEen test is alleen volledig geslaagd als alle runs slagen.…
5.8Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
83.3%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)2.29sResponstijd (max)3.15sResponstijd (totaal)4.58sEen test is alleen volledig geslaagd als alle runs slagen.…
2.29sResponstijd (gem.)…
7,398Totaal aantal invoer-tokens…
2,667Uitvoer-tokens…
0Redeneer-tokens…
Domeinspecifiek
Score
Consistentie
Slaagpercentage per poging
Instabiele tests
Correcte tests
Responstijd (gem.)
Invoer-tokens
Uitvoer-tokens
Redeneer-tokens
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
5.3Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
33.3%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 2Responstijd (gem.)76.98sResponstijd (max)144.07sResponstijd (totaal)230.93sEen test is alleen volledig geslaagd als alle runs slagen.…
7.2Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
11.1%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 3Responstijd (gem.)22.65sResponstijd (max)45.52sResponstijd (totaal)67.95sEen test is alleen volledig geslaagd als alle runs slagen.…
22.65sResponstijd (gem.)…
837Totaal aantal invoer-tokens…
48,299Uitvoer-tokens…
0Redeneer-tokens…
Algemene intelligentie
Score
Consistentie
Slaagpercentage per poging
Instabiele tests
Correcte tests
Responstijd (gem.)
Invoer-tokens
Uitvoer-tokens
Redeneer-tokens
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
5.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Instructies niet gevolgd: 1Responstijd (gem.)9.20sResponstijd (max)9.20sResponstijd (totaal)9.20sEen test is alleen volledig geslaagd als alle runs slagen.…
9.3Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)7.00sResponstijd (max)7.00sResponstijd (totaal)7.00sEen test is alleen volledig geslaagd als alle runs slagen.…
7.00sResponstijd (gem.)…
525Totaal aantal invoer-tokens…
4,604Uitvoer-tokens…
0Redeneer-tokens…
Instructies opvolgen
Score
Consistentie
Slaagpercentage per poging
Instabiele tests
Correcte tests
Responstijd (gem.)
Invoer-tokens
Uitvoer-tokens
Redeneer-tokens
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
10.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
100.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen mislukte antwoorden.Responstijd (gem.)2.54sResponstijd (max)2.67sResponstijd (totaal)5.07sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
100.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen mislukte antwoorden.Responstijd (gem.)1.58sResponstijd (max)1.80sResponstijd (totaal)3.16sEen test is alleen volledig geslaagd als alle runs slagen.…
1.58sResponstijd (gem.)…
735Totaal aantal invoer-tokens…
1,857Uitvoer-tokens…
0Redeneer-tokens…
Puzzeloplossing
Score
Consistentie
Slaagpercentage per poging
Instabiele tests
Correcte tests
Responstijd (gem.)
Invoer-tokens
Uitvoer-tokens
Redeneer-tokens
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
8.3Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
66.7%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Instructies niet gevolgd: 1Responstijd (gem.)12.62sResponstijd (max)29.62sResponstijd (totaal)37.85sEen test is alleen volledig geslaagd als alle runs slagen.…
9.9Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
33.3%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 2Responstijd (gem.)1.84sResponstijd (max)3.42sResponstijd (totaal)5.52sEen test is alleen volledig geslaagd als alle runs slagen.…
1.84sResponstijd (gem.)…
756Totaal aantal invoer-tokens…
3,564Uitvoer-tokens…
0Redeneer-tokens…
Toolaanroepen
Score
Consistentie
Slaagpercentage per poging
Instabiele tests
Correcte tests
Responstijd (gem.)
Invoer-tokens
Uitvoer-tokens
Redeneer-tokens
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
3.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.API-fout: 1Responstijd (gem.)0msResponstijd (max)0msResponstijd (totaal)0msEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
100.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen mislukte antwoorden.Responstijd (gem.)3.25sResponstijd (max)3.25sResponstijd (totaal)3.25sEen test is alleen volledig geslaagd als alle runs slagen.…
3.25sResponstijd (gem.)…
7,746Totaal aantal invoer-tokens…
1,360Uitvoer-tokens…
0Redeneer-tokens…
Algemene kennis
Score
Consistentie
Slaagpercentage per poging
Instabiele tests
Correcte tests
Responstijd (gem.)
Invoer-tokens
Uitvoer-tokens
Redeneer-tokens
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
3.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen antwoord: 1Responstijd (gem.)11.29sResponstijd (max)11.29sResponstijd (totaal)11.29sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen antwoord: 1Responstijd (gem.)124.75sResponstijd (max)124.75sResponstijd (totaal)124.75sEen test is alleen volledig geslaagd als alle runs slagen.…