Typesafe
Releasedatum: 2026-09-18
Getest op: 2026-10-01 17:52
typesafe/jev-1.13::none
-OverigGesloten broncode Samenvatting
Jev 1.13 scoort 2.6 op AI BENCHY en staat op #441. Het model heeft 10.0 betrouwbaarheid, een slagingspercentage van 26.1%, $0.003 totale kosten en 698ms gemiddelde responstijd.
Wat Jev 1.13 uniek maakt: Het valt het meest op in Gegevensparsering en extractie, waar het #1 staat, terwijl Programmeren het zwakste gebied is met #13.
Modelgegevens
Onderzocht op 2026-09-18
- Parameters
- -
- Architectuur
- Overig
- Beschikbaarheid
- Gesloten broncode
- Licentie
- -
2.6
Consistentie
5.2
10.0
Totaal aantal uitvoer-tokens
18,927
Totaal aantal invoer-tokens
67,092
Invoerprijs
$0.042 / 1M
Uitvoerprijs
$0.000 / 1M
Prijs voor cachelezen
n.v.t.
Prijs voor cacheschrijven
n.v.t.
Cacheprijzen gelden voor invoertokens. Lezen hergebruikt opgeslagen prompts; schrijven slaat ze op en kan extra kosten. Voor uitvoertokens geldt de uitvoerprijs.
Foute tests: 6
Slaagpercentage per poging: 26.1%
Benchmarkdekking: 36/69 pogingen. Adapters leveren de keuzes. Ondersteunt 12/23 tests. Andere tests worden niet ondersteund en tellen niet als mislukt. De score gebruikt de volledige testreeks.
Instabiele tests
0
Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).
Grafieken
Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.
Score vs Totale kosten
Responstijd (gem.)
Score vs Responstijd (gem.)
Totaal aantal uitvoer-tokens
Score vs Totaal aantal uitvoer-tokens
Snelle vergelijking
Jev 1.13defaultvsd1-ultradefaultJev 1.13defaultvsDecider V1.2defaultJev 1.13defaultvsSpan-02defaultJev 1.13defaultvsDecider V1.1 27BdefaultJev 1.13defaultvsCommand A+lowJev 1.13defaultvsDrex v1.5defaultJev 1.13defaultvsCommand A+noneJev 1.13defaultvsGPT-6 Luna DecisionsdefaultJev 1.13defaultvsCommand A+highJev 1.13defaultvsKev 4Bdefault
Categorie-uitsplitsing
| Categorie | Score | Consistentie | Correcte tests |
|---|---|---|---|
| Agenttaken | 0.0 | 0.0 | |
| Anti-AI-trucs | 4.0 | 7.5 | |
| Programmeren | 2.2 | 6.7 | |
| Gecombineerd | 0.0 | 0.0 | |
| Gegevensparsering en extractie | 10.0 | 10.0 | |
| Domeinspecifiek | 7.7 | 10.0 | |
| Algemene intelligentie | 0.0 | 0.0 | |
| Instructies opvolgen | 1.5 | 5.0 | |
| Puzzeloplossing | 3.3 | 3.3 | |
| Toolaanroepen | 0.0 | 0.0 | |
| Algemene kennis | 0.0 | 0.0 |