De gemiddelde score is vrijwel gelijk met 5.6 vs 5.5. Qwen3.8 27B heeft lagere benchmarkkosten met ~$0.006 vs $0.048. Qwen3.8 27B is sneller met 3.12s vs 8.65s, met slagingspercentages van 45.5% vs 40.9%.
Benchmarks gegenereerd uit AI BENCHY-testsuites op:
2026-09-28
Vergeleken modellen
Rang
#272
Totaal aantal uitvoer-tokens
66,576
Responstijd (gem.)
8.65s
Totale kosten
$0.048
De antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
Rang
#277
Totaal aantal uitvoer-tokens
11,445
Responstijd (gem.)
3.12s
Totale kosten
~$0.006Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.0572 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.005659.
Aanbevolen modelQwen3.8 27B
Het heeft hier de beste score (5.5) en kost ongeveer 8.4x minder dan KAT-Coder-Air V2.5 (medium).
Qwen3.8 27BQwen3.8 27BnoneDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.Releasedatum: 2026-08-14
Qwen3.8 27BQwen3.8 27BnoneDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.Releasedatum: 2026-08-14
Score
5.6Gemiddelde score over alle benchmarktests.…
5.5Gemiddelde score over alle benchmarktests.…
Rang
#272
#277
Betrouwbaarheid
9.6Succescore bij de eerste poging: 10.0 betekent geen herhaalbare doel-API- of snelheidslimietfouten vóór succesvolle calls; geregistreerde fouten verlagen de score.…
10.0Succescore bij de eerste poging: 10.0 betekent geen herhaalbare doel-API- of snelheidslimietfouten vóór succesvolle calls; geregistreerde fouten verlagen de score.…
Consistentie
8.9Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
45.5%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
40.9%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
Instabiele tests
3Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Totaal runs
66Totaal runs…
66Totaal runs…
Kosten per resultaat
0.596
~0.063Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.0572 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.005659.
Totale kosten
$0.048
~$0.006Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.0572 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.005659.
Invoerprijs
$0.150 / 1MInvoerprijs…
n.v.t.Invoerprijs…
Uitvoerprijs
$0.600 / 1MUitvoerprijs…
n.v.t.Uitvoerprijs…
Totaal aantal invoer-tokens
51,369Totaal aantal invoer-tokens…
122,463Totaal aantal invoer-tokens…
Uitvoer-tokens
8,008Uitvoer-tokens…
11,445Uitvoer-tokens…
Redeneer-tokens
58,568Redeneer-tokens…
0Redeneer-tokens…
Responstijd (gem.)
8.65sResponstijd (gem.)…
3.12sResponstijd (gem.)…
Responstijd (max)
48.19sResponstijd (max)…
44.76sResponstijd (max)…
Responstijd (totaal)
190.35sResponstijd (totaal)…
68.69sResponstijd (totaal)…
Parameters
~35B totaal (~3B actief)
27.3B
Beschikbaarheid
Gesloten broncode
Gewichten beschikbaar
Model generatie-showcase
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#272 KAT-Coder-Air V2.5
medium
Kosten
$0.003
Tijd
23.7s
Tokens
4,924 tok
#277 Qwen3.8 27B
noneDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
Kosten
~$0.001Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.0066 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.000657.
8.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
91.7%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)3.79sResponstijd (max)9.97sResponstijd (totaal)15.17sEen test is alleen volledig geslaagd als alle runs slagen.…
3.79sResponstijd (gem.)…
672Totaal aantal invoer-tokens…
549Uitvoer-tokens…
4,194Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
6.5Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
50.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 2Responstijd (gem.)828msResponstijd (max)1.95sResponstijd (totaal)3.31sEen test is alleen volledig geslaagd als alle runs slagen.…
7.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
22.2%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 2Extra opmaak: 1Responstijd (gem.)23.37sResponstijd (max)48.19sResponstijd (totaal)70.10sEen test is alleen volledig geslaagd als alle runs slagen.…
23.37sResponstijd (gem.)…
7,893Totaal aantal invoer-tokens…
5,199Uitvoer-tokens…
29,973Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
5.5Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
33.3%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 2Responstijd (gem.)1.19sResponstijd (max)1.97sResponstijd (totaal)3.56sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
50.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.API-fout: 1Responstijd (gem.)19.56sResponstijd (max)27.68sResponstijd (totaal)39.11sEen test is alleen volledig geslaagd als alle runs slagen.…
19.56sResponstijd (gem.)…
23,854Totaal aantal invoer-tokens…
435Uitvoer-tokens…
6,811Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
3.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Ongeldige toolaanroep: 1Verkeerd antwoord: 1Responstijd (gem.)24.10sResponstijd (max)44.76sResponstijd (totaal)48.21sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
50.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)3.65sResponstijd (max)4.88sResponstijd (totaal)7.31sEen test is alleen volledig geslaagd als alle runs slagen.…
3.65sResponstijd (gem.)…
7,776Totaal aantal invoer-tokens…
268Uitvoer-tokens…
1,881Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
6.5Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
50.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)1.14sResponstijd (max)1.18sResponstijd (totaal)2.27sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 2Time-out: 1Responstijd (gem.)6.58sResponstijd (max)7.90sResponstijd (totaal)19.73sEen test is alleen volledig geslaagd als alle runs slagen.…
6.58sResponstijd (gem.)…
668Totaal aantal invoer-tokens…
673Uitvoer-tokens…
4,670Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
7.7Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
66.7%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)552msResponstijd (max)675msResponstijd (totaal)1.66sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Instructies niet gevolgd: 1Responstijd (gem.)9.81sResponstijd (max)9.81sResponstijd (totaal)9.81sEen test is alleen volledig geslaagd als alle runs slagen.…
9.81sResponstijd (gem.)…
516Totaal aantal invoer-tokens…
189Uitvoer-tokens…
557Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
4.2Gemiddelde score over alle benchmarktests.…
9.9Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)1.31sResponstijd (max)1.31sResponstijd (totaal)1.31sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
100.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen mislukte antwoorden.Responstijd (gem.)1.50sResponstijd (max)1.88sResponstijd (totaal)3.00sEen test is alleen volledig geslaagd als alle runs slagen.…
1.50sResponstijd (gem.)…
699Totaal aantal invoer-tokens…
93Uitvoer-tokens…
730Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
6.3Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
50.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)582msResponstijd (max)633msResponstijd (totaal)1.16sEen test is alleen volledig geslaagd als alle runs slagen.…
7.2Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
22.2%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 3Responstijd (gem.)1.87sResponstijd (max)2.41sResponstijd (totaal)5.61sEen test is alleen volledig geslaagd als alle runs slagen.…
1.87sResponstijd (gem.)…
696Totaal aantal invoer-tokens…
265Uitvoer-tokens…
1,184Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
6.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
33.3%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Instructies niet gevolgd: 1Verkeerd antwoord: 1Responstijd (gem.)1.25sResponstijd (max)1.84sResponstijd (totaal)3.76sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
100.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen mislukte antwoorden.Responstijd (gem.)4.77sResponstijd (max)4.77sResponstijd (totaal)4.77sEen test is alleen volledig geslaagd als alle runs slagen.…
4.77sResponstijd (gem.)…
8,391Totaal aantal invoer-tokens…
317Uitvoer-tokens…
906Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
10.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
100.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen mislukte antwoorden.Responstijd (gem.)2.75sResponstijd (max)2.75sResponstijd (totaal)2.75sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)15.74sResponstijd (max)15.74sResponstijd (totaal)15.74sEen test is alleen volledig geslaagd als alle runs slagen.…
15.74sResponstijd (gem.)…
204Totaal aantal invoer-tokens…
20Uitvoer-tokens…
7,662Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
3.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)703msResponstijd (max)703msResponstijd (totaal)703msEen test is alleen volledig geslaagd als alle runs slagen.…