AI BENCHY Fehler
Falsche Antwort-Fehler
Sieh, bei welchen KI-Modellen Falsche Antwort besonders häufig auftritt, damit du Zuverlässigkeitsrisiken vor der Auswahl erkennst.
Kategorien
In der Kategorie Domänenspezifisch307 In der Kategorie Anti-KI-Tricks236 In der Kategorie Rätsellösen142 In der Kategorie Allgemeinwissen127 In der Kategorie Programmierung121 In der Kategorie Befolgung von Anweisungen52 In der Kategorie Kombiniert51 In der Kategorie Datenanalyse und -extraktion35 In der Kategorie Allgemeine Intelligenz31 In der Kategorie Werkzeugaufrufe2
| Rang | Modell | Unternehmen | Falsche Antwort-Anzahl | Punktzahl | Korrekte Tests | Antwortzeit (Durchschnitt) |
|---|---|---|---|---|---|---|
| #21 | Hy3 preview medium | Tencent | 3 | 8.1 | 15/20 | 16.3s |
| #22 | Gemini 3 PRO Preview medium | 3 | 8.1 | 15/20 | 9.05s | |
| #28 | Qwen3.5-27B medium | Qwen | 3 | 7.9 | 13/20 | 60.1s |
| #34 | Gemma 4 26B A4B medium | 3 | 7.8 | 14/20 | 50.9s | |
| #48 | MiMo-V2.5-Pro medium | Xiaomi | 3 | 7.6 | 12/20 | 21.8s |
| #49 | Gemini 3.1 Flash Lite high | 3 | 7.6 | 11/18 | 62.0s | |
| #51 | Qwen3.5-Flash medium | Qwen | 3 | 7.6 | 12/20 | 63.0s |
| #53 | Claude Sonnet 4.6 medium | Anthropic | 3 | 7.6 | 13/20 | 15.8s |
| #59 | Kimi K2.6 medium | Moonshot AI | 3 | 7.4 | 12/20 | 54.0s |
| #63 | GPT-5.2 medium | OpenAI | 3 | 7.3 | 12/20 | 16.5s |
| #65 | Claude Opus 4.8 none | Anthropic | 3 | 7.3 | 12/20 | 3.51s |
| #71 | Claude Opus 4.6 medium | Anthropic | 3 | 7.2 | 12/20 | 25.5s |
| #156 | Qwen3.5-9B medium | Qwen | 3 | 4.2 | 3/20 | 83.3s |
| #3 | Gemini 3.5 Flash low | 2 | 9.3 | 18/20 | 2.98s | |
| #4 | Gemini 3.1 Pro Preview medium | 2 | 9.3 | 18/20 | 20.8s |