Typesafe
Veröffentlichung: 2026-09-18
Getestet am: 2026-10-01 17:52
typesafe/jev-1.13::none
-SonstigeGeschlossen Zusammenfassung
Jev 1.13 erreicht 2.6 bei AI BENCHY und liegt auf #441. Das Modell hat 10.0 Zuverlässigkeit, 26.1% Erfolgsrate, $0.003 Gesamtkosten und 698ms durchschnittliche Antwortzeit.
Was Jev 1.13 besonders macht: Am stärksten ist es in Datenanalyse und -extraktion, wo es #1 erreicht; am schwächsten ist Programmierung mit #13.
Modelldaten
Recherchiert am 2026-09-18
- Parameter
- -
- Architektur
- Sonstige
- Verfügbarkeit
- Geschlossen
- Lizenz
- -
2.6
Konsistenz
5.2
10.0
Gesamte Ausgabe-Token
18,927
Gesamte Eingabe-Token
67,092
Eingabepreis
$0.042 / 1M
Ausgabepreis
$0.000 / 1M
Preis für Cache-Lesen
k. A.
Preis für Cache-Schreiben
k. A.
Cache-Preise gelten für Eingabetokens. Lesen nutzt gespeicherte Prompts erneut; Schreiben speichert sie und kann mehr kosten. Für Ausgabetokens gilt der Ausgabepreis.
Falsche Tests: 6
Erfolgsquote pro Versuch: 26.1%
Benchmark-Abdeckung: 36/69 Versuche. Adapter liefern die Auswahlmöglichkeiten. Unterstützt 12/23 Tests. Andere Tests werden nicht unterstützt und gelten nicht als fehlgeschlagen. Die Bewertung nutzt die gesamte Testsuite.
Instabile Tests
0
Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).
Diagramme
Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.
Punktzahl vs Gesamtkosten
Antwortzeit (Durchschnitt)
Punktzahl vs Antwortzeit (Durchschnitt)
Gesamte Ausgabe-Token
Punktzahl vs Gesamte Ausgabe-Token
Schnellvergleich
Jev 1.13defaultvsd1-ultradefaultJev 1.13defaultvsDecider V1.2defaultJev 1.13defaultvsSpan-02defaultJev 1.13defaultvsDecider V1.1 27BdefaultJev 1.13defaultvsCommand A+lowJev 1.13defaultvsDrex v1.5defaultJev 1.13defaultvsCommand A+noneJev 1.13defaultvsGPT-6 Luna DecisionsdefaultJev 1.13defaultvsCommand A+highJev 1.13defaultvsKev 4Bdefault
Kategorieaufschlüsselung
| Kategorie | Punktzahl | Konsistenz | Korrekte Tests |
|---|---|---|---|
| Agentenaufgaben | 0.0 | 0.0 | |
| Anti-KI-Tricks | 4.0 | 7.5 | |
| Programmierung | 2.2 | 6.7 | |
| Kombiniert | 0.0 | 0.0 | |
| Datenanalyse und -extraktion | 10.0 | 10.0 | |
| Domänenspezifisch | 7.7 | 10.0 | |
| Allgemeine Intelligenz | 0.0 | 0.0 | |
| Befolgung von Anweisungen | 1.5 | 5.0 | |
| Rätsellösen | 3.3 | 3.3 | |
| Werkzeugaufrufe | 0.0 | 0.0 | |
| Allgemeinwissen | 0.0 | 0.0 |