Agentenaufgaben
: 5.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)47.78sAntwortzeit (Maximum)47.78sAntwortzeit (Gesamt)47.78s
Anti-KI-Tricks
: 9.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)2.39sAntwortzeit (Maximum)3.58sAntwortzeit (Gesamt)9.57s
Programmierung
: 5.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)3.81sAntwortzeit (Maximum)4.25sAntwortzeit (Gesamt)11.44s
Kombiniert
: 7.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)18.55sAntwortzeit (Maximum)26.22sAntwortzeit (Gesamt)37.09s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.60sAntwortzeit (Maximum)2.69sAntwortzeit (Gesamt)5.19s
Domänenspezifisch
: 2.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 3Antwortzeit (Durchschnitt)3.93sAntwortzeit (Maximum)4.71sAntwortzeit (Gesamt)11.79s
Allgemeine Intelligenz
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.60sAntwortzeit (Maximum)2.60sAntwortzeit (Gesamt)2.60s
Befolgung von Anweisungen
: 9.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.59sAntwortzeit (Maximum)3.04sAntwortzeit (Gesamt)5.17s
Rätsellösen
: 7.6 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)1.95sAntwortzeit (Maximum)2.48sAntwortzeit (Gesamt)5.84s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)4.55sAntwortzeit (Maximum)4.55sAntwortzeit (Gesamt)4.55s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)3.08sAntwortzeit (Maximum)3.08sAntwortzeit (Gesamt)3.08s
Agentenaufgaben
: 5.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)123.99sAntwortzeit (Maximum)123.99sAntwortzeit (Gesamt)123.99s
Anti-KI-Tricks
: 6.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)2.98sAntwortzeit (Maximum)5.77sAntwortzeit (Gesamt)11.92s
Programmierung
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)25.67sAntwortzeit (Maximum)48.61sAntwortzeit (Gesamt)77.02s
Kombiniert
: 6.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)39.89sAntwortzeit (Maximum)67.16sAntwortzeit (Gesamt)79.78s
Datenanalyse und -extraktion
: 6.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)909msAntwortzeit (Maximum)1.49sAntwortzeit (Gesamt)1.82s
Domänenspezifisch
: 5.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)186.27sAntwortzeit (Maximum)256.57sAntwortzeit (Gesamt)558.80s
Allgemeine Intelligenz
: 5.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)5.30sAntwortzeit (Maximum)5.30sAntwortzeit (Gesamt)5.30s
Rätsellösen
: 7.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)3.34sAntwortzeit (Maximum)4.10sAntwortzeit (Gesamt)10.01s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.78sAntwortzeit (Maximum)2.78sAntwortzeit (Gesamt)2.78s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)66.79sAntwortzeit (Maximum)66.79sAntwortzeit (Gesamt)66.79s
Agentenaufgaben
: 6.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)104.96sAntwortzeit (Maximum)104.96sAntwortzeit (Gesamt)104.96s
Anti-KI-Tricks
: 8.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)3.57sAntwortzeit (Maximum)5.96sAntwortzeit (Gesamt)14.27s
Programmierung
: 8.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)16.52sAntwortzeit (Maximum)21.60sAntwortzeit (Gesamt)49.55s
Kombiniert
: 3.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Keine Antwort: 1Antwortzeit (Durchschnitt)131.97sAntwortzeit (Maximum)234.92sAntwortzeit (Gesamt)263.94s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)4.17sAntwortzeit (Maximum)4.56sAntwortzeit (Gesamt)8.34s
Domänenspezifisch
: 3.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 3Antwortzeit (Durchschnitt)11.48sAntwortzeit (Maximum)22.96sAntwortzeit (Gesamt)34.44s
Allgemeine Intelligenz
: 5.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)2.50sAntwortzeit (Maximum)2.50sAntwortzeit (Gesamt)2.50s
Befolgung von Anweisungen
: 8.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)3.60sAntwortzeit (Maximum)3.76sAntwortzeit (Gesamt)7.20s
Rätsellösen
: 7.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)5.06sAntwortzeit (Maximum)7.57sAntwortzeit (Gesamt)15.18s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)5.04sAntwortzeit (Maximum)5.04sAntwortzeit (Gesamt)5.04s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)9.71sAntwortzeit (Maximum)9.71sAntwortzeit (Gesamt)9.71s
Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 7Antwortzeit (Durchschnitt)8.51sAntwortzeit (Maximum)52.64sAntwortzeit (Gesamt)195.76s…
Agentenaufgaben
: 5.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)52.64sAntwortzeit (Maximum)52.64sAntwortzeit (Gesamt)52.64s
Anti-KI-Tricks
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)3.48sAntwortzeit (Maximum)4.31sAntwortzeit (Gesamt)13.94s
Programmierung
: 5.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)6.00sAntwortzeit (Maximum)6.94sAntwortzeit (Gesamt)18.00s
Kombiniert
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)10.20sAntwortzeit (Maximum)17.13sAntwortzeit (Gesamt)20.39s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)9.40sAntwortzeit (Maximum)14.72sAntwortzeit (Gesamt)18.80s
Domänenspezifisch
: 5.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)9.74sAntwortzeit (Maximum)14.40sAntwortzeit (Gesamt)29.22s
Allgemeine Intelligenz
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)3.68sAntwortzeit (Maximum)3.68sAntwortzeit (Gesamt)3.68s
Befolgung von Anweisungen
: 9.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)7.02sAntwortzeit (Maximum)7.35sAntwortzeit (Gesamt)14.03s
Rätsellösen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)5.77sAntwortzeit (Maximum)10.27sAntwortzeit (Gesamt)17.32s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)4.99sAntwortzeit (Maximum)4.99sAntwortzeit (Gesamt)4.99s
Allgemeinwissen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.75sAntwortzeit (Maximum)2.75sAntwortzeit (Gesamt)2.75s
Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 8Antwortzeit (Durchschnitt)16.44sAntwortzeit (Maximum)57.97sAntwortzeit (Gesamt)378.14s…
Agentenaufgaben
: 5.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)57.97sAntwortzeit (Maximum)57.97sAntwortzeit (Gesamt)57.97s
Anti-KI-Tricks
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)9.00sAntwortzeit (Maximum)10.98sAntwortzeit (Gesamt)36.02s
Programmierung
: 5.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)21.69sAntwortzeit (Maximum)26.46sAntwortzeit (Gesamt)65.08s
Kombiniert
: 6.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)23.33sAntwortzeit (Maximum)25.51sAntwortzeit (Gesamt)46.67s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)11.63sAntwortzeit (Maximum)13.54sAntwortzeit (Gesamt)23.25s
Domänenspezifisch
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 3Antwortzeit (Durchschnitt)18.19sAntwortzeit (Maximum)23.65sAntwortzeit (Gesamt)54.57s
Allgemeine Intelligenz
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)16.29sAntwortzeit (Maximum)16.29sAntwortzeit (Gesamt)16.29s
Befolgung von Anweisungen
: 9.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)6.64sAntwortzeit (Maximum)8.11sAntwortzeit (Gesamt)13.28s
Rätsellösen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)8.16sAntwortzeit (Maximum)10.89sAntwortzeit (Gesamt)24.49s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)14.42sAntwortzeit (Maximum)14.42sAntwortzeit (Gesamt)14.42s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)26.11sAntwortzeit (Maximum)26.11sAntwortzeit (Gesamt)26.11s
Agentenaufgaben
: 6.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)95.31sAntwortzeit (Maximum)95.31sAntwortzeit (Gesamt)95.31s
Anti-KI-Tricks
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)9.75sAntwortzeit (Maximum)18.03sAntwortzeit (Gesamt)39.01s
Programmierung
: 6.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Zeitüberschreitung: 1Falsche Antwort: 1Antwortzeit (Durchschnitt)114.48sAntwortzeit (Maximum)168.16sAntwortzeit (Gesamt)343.44s
Kombiniert
: 6.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)313.55sAntwortzeit (Maximum)519.30sAntwortzeit (Gesamt)627.09s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)23.41sAntwortzeit (Maximum)29.79sAntwortzeit (Gesamt)46.83s
Domänenspezifisch
: 2.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 3Antwortzeit (Durchschnitt)74.43sAntwortzeit (Maximum)119.29sAntwortzeit (Gesamt)223.29s
Allgemeine Intelligenz
: 3.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Zeitüberschreitung: 1Antwortzeit (Durchschnitt)34.11sAntwortzeit (Maximum)34.11sAntwortzeit (Gesamt)34.11s
Befolgung von Anweisungen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)9.88sAntwortzeit (Maximum)15.44sAntwortzeit (Gesamt)19.76s
Rätsellösen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)17.89sAntwortzeit (Maximum)31.99sAntwortzeit (Gesamt)53.68s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)4.60sAntwortzeit (Maximum)4.60sAntwortzeit (Gesamt)4.60s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)52.87sAntwortzeit (Maximum)52.87sAntwortzeit (Gesamt)52.87s
Agentenaufgaben
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)55.73sAntwortzeit (Maximum)55.73sAntwortzeit (Gesamt)55.73s
Anti-KI-Tricks
: 6.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Falsche Antwort: 1Antwortzeit (Durchschnitt)14.70sAntwortzeit (Maximum)47.55sAntwortzeit (Gesamt)58.79s
Programmierung
: 2.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 2Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)421.68sAntwortzeit (Maximum)455.72sAntwortzeit (Gesamt)1265.05s
Kombiniert
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)115.30sAntwortzeit (Maximum)205.40sAntwortzeit (Gesamt)230.60s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)6.55sAntwortzeit (Maximum)8.35sAntwortzeit (Gesamt)13.11s
Domänenspezifisch
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 3Antwortzeit (Durchschnitt)333.41sAntwortzeit (Maximum)384.57sAntwortzeit (Gesamt)1000.23s
Allgemeine Intelligenz
: 3.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)36.56sAntwortzeit (Maximum)36.56sAntwortzeit (Gesamt)36.56s
Befolgung von Anweisungen
: 7.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)20.53sAntwortzeit (Maximum)33.28sAntwortzeit (Gesamt)41.06s
Rätsellösen
: 5.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 1Falsche Antwort: 1Antwortzeit (Durchschnitt)143.16sAntwortzeit (Maximum)415.83sAntwortzeit (Gesamt)429.48s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)4.34sAntwortzeit (Maximum)4.34sAntwortzeit (Gesamt)4.34s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 1Antwortzeit (Durchschnitt)416.44sAntwortzeit (Maximum)416.44sAntwortzeit (Gesamt)416.44s
Agentenaufgaben
: 4.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)121.29sAntwortzeit (Maximum)121.29sAntwortzeit (Gesamt)121.29s
Anti-KI-Tricks
: 8.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)22.18sAntwortzeit (Maximum)60.05sAntwortzeit (Gesamt)88.72s
Programmierung
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)37.91sAntwortzeit (Maximum)60.34sAntwortzeit (Gesamt)113.74s
Kombiniert
: 6.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)51.45sAntwortzeit (Maximum)93.10sAntwortzeit (Gesamt)102.91s
Datenanalyse und -extraktion
: 7.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)34.82sAntwortzeit (Maximum)62.94sAntwortzeit (Gesamt)69.64s
Domänenspezifisch
: 2.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2API-Fehler: 1Antwortzeit (Durchschnitt)56.17sAntwortzeit (Maximum)77.05sAntwortzeit (Gesamt)168.51s
Allgemeine Intelligenz
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)5.67sAntwortzeit (Maximum)5.67sAntwortzeit (Gesamt)5.67s
Befolgung von Anweisungen
: 6.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)32.73sAntwortzeit (Maximum)60.73sAntwortzeit (Gesamt)65.46s
Rätsellösen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)3.27sAntwortzeit (Maximum)4.30sAntwortzeit (Gesamt)9.82s
Werkzeugaufrufe
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)26.43sAntwortzeit (Maximum)26.43sAntwortzeit (Gesamt)26.43s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)30.60sAntwortzeit (Maximum)30.60sAntwortzeit (Gesamt)30.60s
Agentenaufgaben
: 5.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)104.02sAntwortzeit (Maximum)104.02sAntwortzeit (Gesamt)104.02s
Anti-KI-Tricks
: 7.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)11.56sAntwortzeit (Maximum)16.30sAntwortzeit (Gesamt)46.24s
Programmierung
: 7.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Zeitüberschreitung: 1Antwortzeit (Durchschnitt)146.73sAntwortzeit (Maximum)365.80sAntwortzeit (Gesamt)440.18s
Kombiniert
: 7.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)66.03sAntwortzeit (Maximum)97.22sAntwortzeit (Gesamt)132.06s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)12.27sAntwortzeit (Maximum)18.56sAntwortzeit (Gesamt)24.54s
Domänenspezifisch
: 3.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Zeitüberschreitung: 1Antwortzeit (Durchschnitt)184.17sAntwortzeit (Maximum)331.73sAntwortzeit (Gesamt)552.51s
Allgemeine Intelligenz
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)10.78sAntwortzeit (Maximum)10.78sAntwortzeit (Gesamt)10.78s
Befolgung von Anweisungen
: 9.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)5.39sAntwortzeit (Maximum)6.01sAntwortzeit (Gesamt)10.78s
Rätsellösen
: 5.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Falsche Antwort: 1Antwortzeit (Durchschnitt)41.00sAntwortzeit (Maximum)113.78sAntwortzeit (Gesamt)123.01s
Werkzeugaufrufe
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)0msAntwortzeit (Maximum)0msAntwortzeit (Gesamt)0ms
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)341.76sAntwortzeit (Maximum)341.76sAntwortzeit (Gesamt)341.76s
Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 8Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)6.38sAntwortzeit (Maximum)67.27sAntwortzeit (Gesamt)146.64s…
Agentenaufgaben
: 5.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)67.27sAntwortzeit (Maximum)67.27sAntwortzeit (Gesamt)67.27s
Anti-KI-Tricks
: 6.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)1.69sAntwortzeit (Maximum)3.13sAntwortzeit (Gesamt)6.77s
Programmierung
: 5.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)1.97sAntwortzeit (Maximum)3.30sAntwortzeit (Gesamt)5.92s
Kombiniert
: 6.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)13.58sAntwortzeit (Maximum)21.22sAntwortzeit (Gesamt)27.16s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.06sAntwortzeit (Maximum)2.18sAntwortzeit (Gesamt)4.12s
Domänenspezifisch
: 7.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)1.81sAntwortzeit (Maximum)2.10sAntwortzeit (Gesamt)5.43s
Allgemeine Intelligenz
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.42sAntwortzeit (Maximum)2.42sAntwortzeit (Gesamt)2.42s
Befolgung von Anweisungen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.12sAntwortzeit (Maximum)2.56sAntwortzeit (Gesamt)4.23s
Rätsellösen
: 8.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)3.09sAntwortzeit (Maximum)4.03sAntwortzeit (Gesamt)9.28s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)7.06sAntwortzeit (Maximum)7.06sAntwortzeit (Gesamt)7.06s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)6.98sAntwortzeit (Maximum)6.98sAntwortzeit (Gesamt)6.98s
Agentenaufgaben
: 7.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Zeitüberschreitung: 1Antwortzeit (Durchschnitt)494.96sAntwortzeit (Maximum)494.96sAntwortzeit (Gesamt)494.96s
Anti-KI-Tricks
: 9.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)45.17sAntwortzeit (Maximum)91.16sAntwortzeit (Gesamt)180.69s
Kombiniert
: 8.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)292.94sAntwortzeit (Maximum)486.97sAntwortzeit (Gesamt)585.88s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)30.62sAntwortzeit (Maximum)45.51sAntwortzeit (Gesamt)61.23s
Domänenspezifisch
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Zeitüberschreitung: 2API-Fehler: 1Antwortzeit (Durchschnitt)734.33sAntwortzeit (Maximum)960.03sAntwortzeit (Gesamt)2202.99s
Allgemeine Intelligenz
: 5.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)31.10sAntwortzeit (Maximum)31.10sAntwortzeit (Gesamt)31.10s
Befolgung von Anweisungen
: 9.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)27.36sAntwortzeit (Maximum)32.66sAntwortzeit (Gesamt)54.72s
Rätsellösen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)91.49sAntwortzeit (Maximum)242.83sAntwortzeit (Gesamt)274.46s
Werkzeugaufrufe
: 4.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)75.01sAntwortzeit (Maximum)75.01sAntwortzeit (Gesamt)75.01s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 1Antwortzeit (Durchschnitt)18.45sAntwortzeit (Maximum)18.45sAntwortzeit (Gesamt)18.45s
Agentenaufgaben
: 5.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)54.91sAntwortzeit (Maximum)54.91sAntwortzeit (Gesamt)54.91s
Anti-KI-Tricks
: 9.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)2.33sAntwortzeit (Maximum)3.89sAntwortzeit (Gesamt)9.30s
Programmierung
: 5.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)4.09sAntwortzeit (Maximum)4.34sAntwortzeit (Gesamt)12.27s
Kombiniert
: 7.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)16.63sAntwortzeit (Maximum)18.34sAntwortzeit (Gesamt)33.26s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.29sAntwortzeit (Maximum)2.31sAntwortzeit (Gesamt)4.59s
Domänenspezifisch
: 5.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)4.09sAntwortzeit (Maximum)5.86sAntwortzeit (Gesamt)12.28s
Allgemeine Intelligenz
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)3.16sAntwortzeit (Maximum)3.16sAntwortzeit (Gesamt)3.16s
Befolgung von Anweisungen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)1.91sAntwortzeit (Maximum)1.93sAntwortzeit (Gesamt)3.82s
Rätsellösen
: 7.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)5.30sAntwortzeit (Maximum)9.55sAntwortzeit (Gesamt)15.89s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)3.80sAntwortzeit (Maximum)3.80sAntwortzeit (Gesamt)3.80s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)2.68sAntwortzeit (Maximum)2.68sAntwortzeit (Gesamt)2.68s
Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 4Zeitüberschreitung: 1Antwortzeit (Durchschnitt)66.52sAntwortzeit (Maximum)238.07sAntwortzeit (Gesamt)1463.50s…
Agentenaufgaben
: 0.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)0msAntwortzeit (Maximum)0msAntwortzeit (Gesamt)0ms
Anti-KI-Tricks
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)22.13sAntwortzeit (Maximum)28.70sAntwortzeit (Gesamt)88.50s
Programmierung
: 8.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)146.48sAntwortzeit (Maximum)238.07sAntwortzeit (Gesamt)439.45s
Kombiniert
: 7.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Zeitüberschreitung: 1Antwortzeit (Durchschnitt)177.48sAntwortzeit (Maximum)233.47sAntwortzeit (Gesamt)354.96s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)41.15sAntwortzeit (Maximum)48.02sAntwortzeit (Gesamt)82.30s
Domänenspezifisch
: 5.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)88.53sAntwortzeit (Maximum)186.74sAntwortzeit (Gesamt)265.58s
Allgemeine Intelligenz
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)32.24sAntwortzeit (Maximum)32.24sAntwortzeit (Gesamt)32.24s
Befolgung von Anweisungen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)24.31sAntwortzeit (Maximum)27.94sAntwortzeit (Gesamt)48.63s
Rätsellösen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)24.32sAntwortzeit (Maximum)37.68sAntwortzeit (Gesamt)72.96s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)18.32sAntwortzeit (Maximum)18.32sAntwortzeit (Gesamt)18.32s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)60.56sAntwortzeit (Maximum)60.56sAntwortzeit (Gesamt)60.56s
Agentenaufgaben
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)955msAntwortzeit (Maximum)955msAntwortzeit (Gesamt)955ms
Anti-KI-Tricks
: 8.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)3.40sAntwortzeit (Maximum)4.78sAntwortzeit (Gesamt)13.59s
Programmierung
: 8.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)9.82sAntwortzeit (Maximum)13.35sAntwortzeit (Gesamt)29.45s
Kombiniert
: 7.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 1Antwortzeit (Durchschnitt)13.91sAntwortzeit (Maximum)18.70sAntwortzeit (Gesamt)27.82s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)3.05sAntwortzeit (Maximum)3.33sAntwortzeit (Gesamt)6.10s
Domänenspezifisch
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2API-Fehler: 1Antwortzeit (Durchschnitt)23.67sAntwortzeit (Maximum)38.52sAntwortzeit (Gesamt)47.34s
Allgemeine Intelligenz
: 4.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)3.20sAntwortzeit (Maximum)3.20sAntwortzeit (Gesamt)3.20s
Befolgung von Anweisungen
: 9.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)5.51sAntwortzeit (Maximum)6.55sAntwortzeit (Gesamt)11.02s
Rätsellösen
: 7.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)4.10sAntwortzeit (Maximum)5.04sAntwortzeit (Gesamt)12.31s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)4.68sAntwortzeit (Maximum)4.68sAntwortzeit (Gesamt)4.68s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)6.89sAntwortzeit (Maximum)6.89sAntwortzeit (Gesamt)6.89s
Agentenaufgaben
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)113.57sAntwortzeit (Maximum)113.57sAntwortzeit (Gesamt)113.57s
Anti-KI-Tricks
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)4.14sAntwortzeit (Maximum)12.41sAntwortzeit (Gesamt)16.57s
Programmierung
: 6.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)97.14sAntwortzeit (Maximum)162.44sAntwortzeit (Gesamt)291.41s
Kombiniert
: 8.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)77.97sAntwortzeit (Maximum)139.08sAntwortzeit (Gesamt)155.93s
Allgemeine Intelligenz
: 5.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)5.37sAntwortzeit (Maximum)5.37sAntwortzeit (Gesamt)5.37s
Befolgung von Anweisungen
: 9.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)1.80sAntwortzeit (Maximum)1.81sAntwortzeit (Gesamt)3.60s
Rätsellösen
: 8.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 1Antwortzeit (Durchschnitt)20.25sAntwortzeit (Maximum)57.93sAntwortzeit (Gesamt)60.76s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)7.29sAntwortzeit (Maximum)7.29sAntwortzeit (Gesamt)7.29s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)51.29sAntwortzeit (Maximum)51.29sAntwortzeit (Gesamt)51.29s
Agentenaufgaben
: 4.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)107.91sAntwortzeit (Maximum)107.91sAntwortzeit (Gesamt)107.91s
Anti-KI-Tricks
: 8.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)1.51sAntwortzeit (Maximum)3.18sAntwortzeit (Gesamt)6.04s
Programmierung
: 8.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)10.97sAntwortzeit (Maximum)12.52sAntwortzeit (Gesamt)32.91s
Kombiniert
: 6.6 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)20.80sAntwortzeit (Maximum)31.28sAntwortzeit (Gesamt)41.61s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)1.51sAntwortzeit (Maximum)1.82sAntwortzeit (Gesamt)3.02s
Allgemeine Intelligenz
: 4.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)1.60sAntwortzeit (Maximum)1.60sAntwortzeit (Gesamt)1.60s
Befolgung von Anweisungen
: 8.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)955msAntwortzeit (Maximum)1.10sAntwortzeit (Gesamt)1.91s
Rätsellösen
: 8.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)24.19sAntwortzeit (Maximum)69.75sAntwortzeit (Gesamt)72.58s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.29sAntwortzeit (Maximum)2.29sAntwortzeit (Gesamt)2.29s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)154.43sAntwortzeit (Maximum)154.43sAntwortzeit (Gesamt)154.43s
Agentenaufgaben
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)51.50sAntwortzeit (Maximum)51.50sAntwortzeit (Gesamt)51.50s
Anti-KI-Tricks
: 6.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)1.76sAntwortzeit (Maximum)2.95sAntwortzeit (Gesamt)7.03s
Programmierung
: 5.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)8.98sAntwortzeit (Maximum)17.97sAntwortzeit (Gesamt)26.95s
Kombiniert
: 7.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)20.57sAntwortzeit (Maximum)35.10sAntwortzeit (Gesamt)41.14s
Datenanalyse und -extraktion
: 6.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)806msAntwortzeit (Maximum)1.38sAntwortzeit (Gesamt)1.61s
Domänenspezifisch
: 7.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)53.28sAntwortzeit (Maximum)133.79sAntwortzeit (Gesamt)159.85s
Allgemeine Intelligenz
: 5.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)3.19sAntwortzeit (Maximum)3.19sAntwortzeit (Gesamt)3.19s
Befolgung von Anweisungen
: 6.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)1.60sAntwortzeit (Maximum)1.64sAntwortzeit (Gesamt)3.20s
Rätsellösen
: 7.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)2.12sAntwortzeit (Maximum)3.40sAntwortzeit (Gesamt)6.37s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.76sAntwortzeit (Maximum)2.76sAntwortzeit (Gesamt)2.76s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)37.65sAntwortzeit (Maximum)37.65sAntwortzeit (Gesamt)37.65s
Agentenaufgaben
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)74.39sAntwortzeit (Maximum)74.39sAntwortzeit (Gesamt)74.39s
Anti-KI-Tricks
: 7.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)1.71sAntwortzeit (Maximum)2.32sAntwortzeit (Gesamt)6.83s
Programmierung
: 6.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)6.37sAntwortzeit (Maximum)10.11sAntwortzeit (Gesamt)19.10s
Kombiniert
: 2.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Falsche Antwort: 1Antwortzeit (Durchschnitt)15.97sAntwortzeit (Maximum)22.89sAntwortzeit (Gesamt)31.94s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)1.74sAntwortzeit (Maximum)1.87sAntwortzeit (Gesamt)3.48s
Domänenspezifisch
: 3.6 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 3Antwortzeit (Durchschnitt)3.52sAntwortzeit (Maximum)5.14sAntwortzeit (Gesamt)10.57s
Allgemeine Intelligenz
: 3.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)1.79sAntwortzeit (Maximum)1.79sAntwortzeit (Gesamt)1.79s
Befolgung von Anweisungen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)1.51sAntwortzeit (Maximum)1.66sAntwortzeit (Gesamt)3.03s
Rätsellösen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)1.84sAntwortzeit (Maximum)2.15sAntwortzeit (Gesamt)5.53s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)10.30sAntwortzeit (Maximum)10.30sAntwortzeit (Gesamt)10.30s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 1Antwortzeit (Durchschnitt)2.60sAntwortzeit (Maximum)2.60sAntwortzeit (Gesamt)2.60s
~$0.195Nur geschätzte GPU-Stromkosten. Der übrige Computer und die Anschaffungskosten der Hardware sind nicht enthalten. NVIDIA GeForce RTX 3090: 1.9676 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.194534.
Agentenaufgaben
: 4.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)173.66sAntwortzeit (Maximum)173.66sAntwortzeit (Gesamt)173.66s
Anti-KI-Tricks
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)6.73sAntwortzeit (Maximum)18.55sAntwortzeit (Gesamt)26.91s
Programmierung
: 7.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)192.20sAntwortzeit (Maximum)370.86sAntwortzeit (Gesamt)576.59s
Kombiniert
: 7.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)92.24sAntwortzeit (Maximum)143.77sAntwortzeit (Gesamt)184.49s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)9.24sAntwortzeit (Maximum)9.63sAntwortzeit (Gesamt)18.48s
Domänenspezifisch
: 3.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 3Antwortzeit (Durchschnitt)326.96sAntwortzeit (Maximum)674.08sAntwortzeit (Gesamt)980.89s
Allgemeine Intelligenz
: 4.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)3.95sAntwortzeit (Maximum)3.95sAntwortzeit (Gesamt)3.95s
Befolgung von Anweisungen
: 9.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)3.72sAntwortzeit (Maximum)3.99sAntwortzeit (Gesamt)7.44s
Rätsellösen
: 7.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)19.51sAntwortzeit (Maximum)39.77sAntwortzeit (Gesamt)58.54s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)5.11sAntwortzeit (Maximum)5.11sAntwortzeit (Gesamt)5.11s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)325.04sAntwortzeit (Maximum)325.04sAntwortzeit (Gesamt)325.04s
Agentenaufgaben
: 5.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)79.61sAntwortzeit (Maximum)79.61sAntwortzeit (Gesamt)79.61s
Anti-KI-Tricks
: 5.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 3Antwortzeit (Durchschnitt)4.33sAntwortzeit (Maximum)9.08sAntwortzeit (Gesamt)17.30s
Kombiniert
: 8.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)30.54sAntwortzeit (Maximum)47.72sAntwortzeit (Gesamt)61.09s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)3.88sAntwortzeit (Maximum)4.06sAntwortzeit (Gesamt)7.75s
Domänenspezifisch
: 5.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)11.10sAntwortzeit (Maximum)26.91sAntwortzeit (Gesamt)33.31s
Allgemeine Intelligenz
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)3.70sAntwortzeit (Maximum)3.70sAntwortzeit (Gesamt)3.70s
Befolgung von Anweisungen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)2.81sAntwortzeit (Maximum)2.98sAntwortzeit (Gesamt)5.62s
Rätsellösen
: 7.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Zusätzliche Formatierung: 1Antwortzeit (Durchschnitt)3.66sAntwortzeit (Maximum)4.75sAntwortzeit (Gesamt)10.98s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)7.89sAntwortzeit (Maximum)7.89sAntwortzeit (Gesamt)7.89s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 1Antwortzeit (Durchschnitt)4.08sAntwortzeit (Maximum)4.08sAntwortzeit (Gesamt)4.08s
Agentenaufgaben
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)145.90sAntwortzeit (Maximum)145.90sAntwortzeit (Gesamt)145.90s
Anti-KI-Tricks
: 8.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)12.62sAntwortzeit (Maximum)18.61sAntwortzeit (Gesamt)50.50s
Programmierung
: 7.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 1Antwortzeit (Durchschnitt)142.99sAntwortzeit (Maximum)168.22sAntwortzeit (Gesamt)428.96s
Kombiniert
: 6.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 2Antwortzeit (Durchschnitt)584.09sAntwortzeit (Maximum)1085.11sAntwortzeit (Gesamt)1168.18s
Datenanalyse und -extraktion
: 3.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 2Antwortzeit (Durchschnitt)37.30sAntwortzeit (Maximum)54.01sAntwortzeit (Gesamt)74.60s
Allgemeine Intelligenz
: 6.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)39.53sAntwortzeit (Maximum)39.53sAntwortzeit (Gesamt)39.53s
Befolgung von Anweisungen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)37.96sAntwortzeit (Maximum)47.48sAntwortzeit (Gesamt)75.92s
Rätsellösen
: 7.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)61.14sAntwortzeit (Maximum)97.76sAntwortzeit (Gesamt)183.42s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)16.88sAntwortzeit (Maximum)16.88sAntwortzeit (Gesamt)16.88s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)80.99sAntwortzeit (Maximum)80.99sAntwortzeit (Gesamt)80.99s
Agentenaufgaben
: 7.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)83.63sAntwortzeit (Maximum)83.63sAntwortzeit (Gesamt)83.63s
Anti-KI-Tricks
: 8.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)4.02sAntwortzeit (Maximum)12.52sAntwortzeit (Gesamt)16.10s
Programmierung
: 8.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)9.46sAntwortzeit (Maximum)12.69sAntwortzeit (Gesamt)28.38s
Kombiniert
: 7.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)66.18sAntwortzeit (Maximum)124.39sAntwortzeit (Gesamt)132.37s
Datenanalyse und -extraktion
: 7.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)2.29sAntwortzeit (Maximum)3.15sAntwortzeit (Gesamt)4.58s
Domänenspezifisch
: 2.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 3Antwortzeit (Durchschnitt)22.65sAntwortzeit (Maximum)45.52sAntwortzeit (Gesamt)67.95s
Allgemeine Intelligenz
: 3.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)7.00sAntwortzeit (Maximum)7.00sAntwortzeit (Gesamt)7.00s
Befolgung von Anweisungen
: 9.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)1.58sAntwortzeit (Maximum)1.80sAntwortzeit (Gesamt)3.16s
Rätsellösen
: 5.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)1.84sAntwortzeit (Maximum)3.42sAntwortzeit (Gesamt)5.52s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)3.25sAntwortzeit (Maximum)3.25sAntwortzeit (Gesamt)3.25s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 1Antwortzeit (Durchschnitt)124.75sAntwortzeit (Maximum)124.75sAntwortzeit (Gesamt)124.75s
Agentenaufgaben
: 4.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)110.70sAntwortzeit (Maximum)110.70sAntwortzeit (Gesamt)110.70s
Anti-KI-Tricks
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)23.66sAntwortzeit (Maximum)25.06sAntwortzeit (Gesamt)47.32s
Programmierung
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)74.30sAntwortzeit (Maximum)99.85sAntwortzeit (Gesamt)222.91s
Kombiniert
: 5.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)28.96sAntwortzeit (Maximum)28.96sAntwortzeit (Gesamt)28.96s
Datenanalyse und -extraktion
: 7.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 1Antwortzeit (Durchschnitt)8.90sAntwortzeit (Maximum)8.90sAntwortzeit (Gesamt)8.90s
Allgemeine Intelligenz
: 6.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Antwortzeit (Durchschnitt)14.69sAntwortzeit (Maximum)14.69sAntwortzeit (Gesamt)14.69s
Befolgung von Anweisungen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)7.25sAntwortzeit (Maximum)7.25sAntwortzeit (Gesamt)7.25s
Rätsellösen
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)11.33sAntwortzeit (Maximum)16.34sAntwortzeit (Gesamt)22.66s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)15.93sAntwortzeit (Maximum)15.93sAntwortzeit (Gesamt)15.93s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)67.37sAntwortzeit (Maximum)67.37sAntwortzeit (Gesamt)67.37s
Agentenaufgaben
: 6.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)174.08sAntwortzeit (Maximum)174.08sAntwortzeit (Gesamt)174.08s
Anti-KI-Tricks
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)9.65sAntwortzeit (Maximum)13.92sAntwortzeit (Gesamt)38.61s
Programmierung
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)455.00sAntwortzeit (Maximum)493.86sAntwortzeit (Gesamt)1364.99s
Kombiniert
: 7.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.API-Fehler: 1Antwortzeit (Durchschnitt)151.04sAntwortzeit (Maximum)195.58sAntwortzeit (Gesamt)302.08s
Datenanalyse und -extraktion
: 6.3 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine Antwort: 1Antwortzeit (Durchschnitt)10.63sAntwortzeit (Maximum)18.16sAntwortzeit (Gesamt)21.27s
Domänenspezifisch
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Zeitüberschreitung: 1Antwortzeit (Durchschnitt)390.56sAntwortzeit (Maximum)939.52sAntwortzeit (Gesamt)1171.67s
Allgemeine Intelligenz
: 4.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)16.35sAntwortzeit (Maximum)16.35sAntwortzeit (Gesamt)16.35s
Befolgung von Anweisungen
: 6.5 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)7.38sAntwortzeit (Maximum)8.27sAntwortzeit (Gesamt)14.75s
Rätsellösen
: 5.4 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 2Antwortzeit (Durchschnitt)8.84sAntwortzeit (Maximum)14.18sAntwortzeit (Gesamt)26.51s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)10.67sAntwortzeit (Maximum)10.67sAntwortzeit (Gesamt)10.67s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)191.19sAntwortzeit (Maximum)191.19sAntwortzeit (Gesamt)191.19s
Agentenaufgaben
: 4.7 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)135.86sAntwortzeit (Maximum)135.86sAntwortzeit (Gesamt)135.86s
Anti-KI-Tricks
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)10.21sAntwortzeit (Maximum)15.82sAntwortzeit (Gesamt)40.82s
Programmierung
: 8.2 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)58.84sAntwortzeit (Maximum)69.05sAntwortzeit (Gesamt)176.53s
Kombiniert
: 6.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Ungültiger Werkzeugaufruf: 1Antwortzeit (Durchschnitt)231.97sAntwortzeit (Maximum)431.47sAntwortzeit (Gesamt)463.94s
Datenanalyse und -extraktion
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)20.10sAntwortzeit (Maximum)26.73sAntwortzeit (Gesamt)40.19s
Domänenspezifisch
: 2.9 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 3Antwortzeit (Durchschnitt)34.43sAntwortzeit (Maximum)56.51sAntwortzeit (Gesamt)103.29s
Allgemeine Intelligenz
: 5.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)10.73sAntwortzeit (Maximum)10.73sAntwortzeit (Gesamt)10.73s
Befolgung von Anweisungen
: 9.8 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)9.41sAntwortzeit (Maximum)10.36sAntwortzeit (Gesamt)18.82s
Rätsellösen
: 7.1 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Anweisungen nicht befolgt: 1Falsche Antwort: 1Antwortzeit (Durchschnitt)10.79sAntwortzeit (Maximum)16.74sAntwortzeit (Gesamt)32.37s
Werkzeugaufrufe
: 10.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Keine fehlgeschlagenen Antworten.Antwortzeit (Durchschnitt)5.72sAntwortzeit (Maximum)5.72sAntwortzeit (Gesamt)5.72s
Allgemeinwissen
: 3.0 Ein Test gilt nur dann als vollständig bestanden, wenn alle Läufe bestanden wurden.Falsche Antwort: 1Antwortzeit (Durchschnitt)17.70sAntwortzeit (Maximum)17.70sAntwortzeit (Gesamt)17.70s
Globale Benchmark-Trends
Sieh, wie aktuelle Modelle Score, Kosten, Geschwindigkeit, Ausgabelänge und Kategoriestärke ausbalancieren.