KAT-Coder-Air V2.5 (high) leidt in gemiddelde score met 5.6 vs 5.5. Qwen3.8 27B heeft lagere benchmarkkosten met ~$0.006 vs $0.077. Qwen3.8 27B is sneller met 3.12s vs 15.87s, met slagingspercentages van 42.4% vs 40.9%.
Benchmarks gegenereerd uit AI BENCHY-testsuites op:
2026-09-28
Vergeleken modellen
Rang
#265
Totaal aantal uitvoer-tokens
114,654
Responstijd (gem.)
15.87s
Totale kosten
$0.077
De antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
Rang
#277
Totaal aantal uitvoer-tokens
11,445
Responstijd (gem.)
3.12s
Totale kosten
~$0.006Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.0572 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.005659.
Aanbevolen modelQwen3.8 27B
De score blijft dicht bij de beste score hier (5.5 vs 5.6) en het kost ongeveer 13.5x minder dan KAT-Coder-Air V2.5 (high).
Qwen3.8 27BQwen3.8 27BnoneDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.Releasedatum: 2026-08-14
Qwen3.8 27BQwen3.8 27BnoneDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.Releasedatum: 2026-08-14
Score
5.6Gemiddelde score over alle benchmarktests.…
5.5Gemiddelde score over alle benchmarktests.…
Rang
#265
#277
Betrouwbaarheid
9.8Succescore bij de eerste poging: 10.0 betekent geen herhaalbare doel-API- of snelheidslimietfouten vóór succesvolle calls; geregistreerde fouten verlagen de score.…
10.0Succescore bij de eerste poging: 10.0 betekent geen herhaalbare doel-API- of snelheidslimietfouten vóór succesvolle calls; geregistreerde fouten verlagen de score.…
Consistentie
8.1Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
Pogingen
66/66
66/66
Correcte tests
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 9API-fout: 3Extra opmaak: 3Responstijd (gem.)15.87sResponstijd (max)118.35sResponstijd (totaal)349.16sEen test is alleen volledig geslaagd als alle runs slagen.…
42.4%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
40.9%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
Instabiele tests
5Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Totaal runs
66Totaal runs…
66Totaal runs…
Kosten per resultaat
1.091
~0.063Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.0572 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.005659.
Totale kosten
$0.077
~$0.006Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.0572 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.005659.
Invoerprijs
$0.150 / 1MInvoerprijs…
n.v.t.Invoerprijs…
Uitvoerprijs
$0.600 / 1MUitvoerprijs…
n.v.t.Uitvoerprijs…
Totaal aantal invoer-tokens
50,423Totaal aantal invoer-tokens…
122,463Totaal aantal invoer-tokens…
Uitvoer-tokens
4,144Uitvoer-tokens…
11,445Uitvoer-tokens…
Redeneer-tokens
110,510Redeneer-tokens…
0Redeneer-tokens…
Responstijd (gem.)
15.87sResponstijd (gem.)…
3.12sResponstijd (gem.)…
Responstijd (max)
118.35sResponstijd (max)…
44.76sResponstijd (max)…
Responstijd (totaal)
349.16sResponstijd (totaal)…
68.69sResponstijd (totaal)…
Parameters
~35B totaal (~3B actief)
27.3B
Beschikbaarheid
Gesloten broncode
Gewichten beschikbaar
Model generatie-showcase
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#265 KAT-Coder-Air V2.5
high
Reached the allocated time limit (300 seconds) without receiving showcase output.
Kosten
$0.000
Tijd
300.0s
Tokens
0 tok
#277 Qwen3.8 27B
noneDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
Kosten
~$0.001Alleen de stroomkosten van de GPU zijn geschat. De rest van de computer en de aanschaf van hardware zijn niet inbegrepen. NVIDIA GeForce RTX 3090: 0.0066 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.000657.
5.8Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
75.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
2Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.API-fout: 1Verkeerd antwoord: 1Responstijd (gem.)2.49sResponstijd (max)3.97sResponstijd (totaal)9.97sEen test is alleen volledig geslaagd als alle runs slagen.…
2.49sResponstijd (gem.)…
615Totaal aantal invoer-tokens…
204Uitvoer-tokens…
1,290Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
6.5Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
50.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 2Responstijd (gem.)828msResponstijd (max)1.95sResponstijd (totaal)3.31sEen test is alleen volledig geslaagd als alle runs slagen.…
7.3Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
11.1%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
1Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.API-fout: 1Extra opmaak: 1Verkeerd antwoord: 1Responstijd (gem.)39.07sResponstijd (max)104.98sResponstijd (totaal)117.21sEen test is alleen volledig geslaagd als alle runs slagen.…
39.07sResponstijd (gem.)…
6,948Totaal aantal invoer-tokens…
1,166Uitvoer-tokens…
55,883Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
5.5Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
33.3%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 2Responstijd (gem.)1.19sResponstijd (max)1.97sResponstijd (totaal)3.56sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
50.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.API-fout: 1Responstijd (gem.)74.48sResponstijd (max)118.35sResponstijd (totaal)148.95sEen test is alleen volledig geslaagd als alle runs slagen.…
74.48sResponstijd (gem.)…
23,854Totaal aantal invoer-tokens…
485Uitvoer-tokens…
28,559Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
3.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Ongeldige toolaanroep: 1Verkeerd antwoord: 1Responstijd (gem.)24.10sResponstijd (max)44.76sResponstijd (totaal)48.21sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
50.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)3.59sResponstijd (max)4.92sResponstijd (totaal)7.18sEen test is alleen volledig geslaagd als alle runs slagen.…
3.59sResponstijd (gem.)…
7,776Totaal aantal invoer-tokens…
284Uitvoer-tokens…
2,140Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
6.5Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
50.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)1.14sResponstijd (max)1.18sResponstijd (totaal)2.27sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Extra opmaak: 2Verkeerd antwoord: 1Responstijd (gem.)7.28sResponstijd (max)8.71sResponstijd (totaal)21.85sEen test is alleen volledig geslaagd als alle runs slagen.…
7.28sResponstijd (gem.)…
724Totaal aantal invoer-tokens…
1,101Uitvoer-tokens…
7,738Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
7.7Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
66.7%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)552msResponstijd (max)675msResponstijd (totaal)1.66sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)7.10sResponstijd (max)7.10sResponstijd (totaal)7.10sEen test is alleen volledig geslaagd als alle runs slagen.…
7.10sResponstijd (gem.)…
516Totaal aantal invoer-tokens…
179Uitvoer-tokens…
539Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
4.2Gemiddelde score over alle benchmarktests.…
9.9Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)1.31sResponstijd (max)1.31sResponstijd (totaal)1.31sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
100.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen mislukte antwoorden.Responstijd (gem.)1.51sResponstijd (max)1.91sResponstijd (totaal)3.01sEen test is alleen volledig geslaagd als alle runs slagen.…
1.51sResponstijd (gem.)…
699Totaal aantal invoer-tokens…
90Uitvoer-tokens…
675Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
6.3Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
50.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)582msResponstijd (max)633msResponstijd (totaal)1.16sEen test is alleen volledig geslaagd als alle runs slagen.…
4.4Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
33.3%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
2Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 3Responstijd (gem.)2.47sResponstijd (max)2.86sResponstijd (totaal)7.40sEen test is alleen volledig geslaagd als alle runs slagen.…
2.47sResponstijd (gem.)…
696Totaal aantal invoer-tokens…
285Uitvoer-tokens…
1,576Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
6.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
33.3%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Instructies niet gevolgd: 1Verkeerd antwoord: 1Responstijd (gem.)1.25sResponstijd (max)1.84sResponstijd (totaal)3.76sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
100.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen mislukte antwoorden.Responstijd (gem.)4.77sResponstijd (max)4.77sResponstijd (totaal)4.77sEen test is alleen volledig geslaagd als alle runs slagen.…
4.77sResponstijd (gem.)…
8,391Totaal aantal invoer-tokens…
330Uitvoer-tokens…
1,082Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
10.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
100.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Geen mislukte antwoorden.Responstijd (gem.)2.75sResponstijd (max)2.75sResponstijd (totaal)2.75sEen test is alleen volledig geslaagd als alle runs slagen.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)21.72sResponstijd (max)21.72sResponstijd (totaal)21.72sEen test is alleen volledig geslaagd als alle runs slagen.…
21.72sResponstijd (gem.)…
204Totaal aantal invoer-tokens…
20Uitvoer-tokens…
11,028Redeneer-tokens…
Qwen3.8 27BDe antwoorden van het kandidaatmodel zijn op lokale hardware gemaakt. OpenRouter is alleen voor de beoordeling gebruikt.
3.0Gemiddelde score over alle benchmarktests.…
10.0Consistentie geeft stabiliteit tussen runs weer (10 = zeer consistent, zelfs als consequent fout).…
0.0%Slaagpercentage per poging = geslaagde pogingen / totale pogingen over alle runs.…
0Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).…
Een test is alleen volledig geslaagd als alle runs slagen.Verkeerd antwoord: 1Responstijd (gem.)703msResponstijd (max)703msResponstijd (totaal)703msEen test is alleen volledig geslaagd als alle runs slagen.…