Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)64.52sTempo de resposta (máx.)64.52sTempo de resposta (total)64.52s
Truques anti-IA
: 6.6 Um teste é totalmente aprovado apenas quando todas as execuções passam.Tempo esgotado: 1Resposta incorreta: 1Tempo de resposta (médio)74.75sTempo de resposta (máx.)182.10sTempo de resposta (total)298.98s
Programação
: 5.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Tempo esgotado: 1Resposta incorreta: 1Tempo de resposta (médio)220.48sTempo de resposta (máx.)243.66sTempo de resposta (total)440.97s
Combinado
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)282.30sTempo de resposta (máx.)301.78sTempo de resposta (total)564.61s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)24.27sTempo de resposta (máx.)27.52sTempo de resposta (total)48.54s
Inteligência geral
: 5.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)36.65sTempo de resposta (máx.)36.65sTempo de resposta (total)36.65s
Seguimento de instruções
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)17.47sTempo de resposta (máx.)19.46sTempo de resposta (total)34.93s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)31.79sTempo de resposta (máx.)50.78sTempo de resposta (total)95.38s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)88.68sTempo de resposta (máx.)88.68sTempo de resposta (total)88.68s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)56.76sTempo de resposta (máx.)56.76sTempo de resposta (total)56.76s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)225.59sTempo de resposta (máx.)225.59sTempo de resposta (total)225.59s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)8.31sTempo de resposta (máx.)14.20sTempo de resposta (total)33.24s
Combinado
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)175.93sTempo de resposta (máx.)308.75sTempo de resposta (total)351.86s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)9.33sTempo de resposta (máx.)9.40sTempo de resposta (total)18.66s
Inteligência geral
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)20.95sTempo de resposta (máx.)20.95sTempo de resposta (total)20.95s
Seguimento de instruções
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)7.47sTempo de resposta (máx.)10.16sTempo de resposta (total)14.94s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)31.64sTempo de resposta (máx.)46.04sTempo de resposta (total)94.91s
Chamada de ferramentas
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)0msTempo de resposta (máx.)0msTempo de resposta (total)0ms
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)29.40sTempo de resposta (máx.)29.40sTempo de resposta (total)29.40s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 10Tempo de resposta (médio)29.38sTempo de resposta (máx.)234.56sTempo de resposta (total)675.79s…
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)73.43sTempo de resposta (máx.)73.43sTempo de resposta (total)73.43s
Truques anti-IA
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)3.48sTempo de resposta (máx.)7.38sTempo de resposta (total)13.91s
Programação
: 6.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)8.29sTempo de resposta (máx.)10.90sTempo de resposta (total)24.86s
Combinado
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)19.30sTempo de resposta (máx.)33.65sTempo de resposta (total)38.60s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)1.91sTempo de resposta (máx.)2.40sTempo de resposta (total)3.82s
Específico do domínio
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)85.05sTempo de resposta (máx.)133.95sTempo de resposta (total)255.16s
Inteligência geral
: 4.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.75sTempo de resposta (máx.)4.75sTempo de resposta (total)4.75s
Seguimento de instruções
: 6.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)2.04sTempo de resposta (máx.)2.33sTempo de resposta (total)4.08s
Resolução de quebra-cabeças
: 8.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)6.43sTempo de resposta (máx.)14.39sTempo de resposta (total)19.28s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.34sTempo de resposta (máx.)3.34sTempo de resposta (total)3.34s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)234.56sTempo de resposta (máx.)234.56sTempo de resposta (total)234.56s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)51.03sTempo de resposta (máx.)51.03sTempo de resposta (total)51.03s
Truques anti-IA
: 6.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Resposta incorreta: 1Tempo de resposta (médio)11.00sTempo de resposta (máx.)21.96sTempo de resposta (total)44.00s
Programação
: 6.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)15.39sTempo de resposta (máx.)23.64sTempo de resposta (total)46.16s
Combinado
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)49.77sTempo de resposta (máx.)89.37sTempo de resposta (total)99.54s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)9.94sTempo de resposta (máx.)17.89sTempo de resposta (total)19.89s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)18.09sTempo de resposta (máx.)27.87sTempo de resposta (total)54.28s
Inteligência geral
: 4.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)1.46sTempo de resposta (máx.)1.46sTempo de resposta (total)1.46s
Seguimento de instruções
: 7.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)17.38sTempo de resposta (máx.)17.50sTempo de resposta (total)34.76s
Resolução de quebra-cabeças
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)27.45sTempo de resposta (máx.)30.30sTempo de resposta (total)82.36s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)71.65sTempo de resposta (máx.)71.65sTempo de resposta (total)71.65s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)29.10sTempo de resposta (máx.)29.10sTempo de resposta (total)29.10s
~$0.089A estimativa inclui apenas a eletricidade da GPU. Exclui o resto do computador e a aquisição do hardware. NVIDIA GeForce RTX 3090: 0.8932 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.088310.
Tarefas de agentes
: 6.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)211.32sTempo de resposta (máx.)211.32sTempo de resposta (total)211.32s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.02sTempo de resposta (máx.)5.68sTempo de resposta (total)12.07s
Programação
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)140.92sTempo de resposta (máx.)376.04sTempo de resposta (total)422.75s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)90.63sTempo de resposta (máx.)143.71sTempo de resposta (total)181.27s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)8.03sTempo de resposta (máx.)9.09sTempo de resposta (total)16.06s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)60.78sTempo de resposta (máx.)120.94sTempo de resposta (total)182.34s
Inteligência geral
: 5.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)5.37sTempo de resposta (máx.)5.37sTempo de resposta (total)5.37s
Seguimento de instruções
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.43sTempo de resposta (máx.)2.87sTempo de resposta (total)4.86s
Resolução de quebra-cabeças
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.91sTempo de resposta (máx.)8.81sTempo de resposta (total)14.74s
Chamada de ferramentas
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)8.42sTempo de resposta (máx.)8.42sTempo de resposta (total)8.42s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)12.64sTempo de resposta (máx.)12.64sTempo de resposta (total)12.64s
~$0.047A estimativa inclui apenas a eletricidade da GPU. Exclui o resto do computador e a aquisição do hardware. NVIDIA GeForce RTX 3090: 0.4752 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.046984.
Tarefas de agentes
: 4.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)159.62sTempo de resposta (máx.)159.62sTempo de resposta (total)159.62s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)1.81sTempo de resposta (máx.)2.74sTempo de resposta (total)7.24s
Programação
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)45.53sTempo de resposta (máx.)98.91sTempo de resposta (total)136.59s
Combinado
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)76.72sTempo de resposta (máx.)116.08sTempo de resposta (total)153.43s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.65sTempo de resposta (máx.)7.50sTempo de resposta (total)13.31s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)17.29sTempo de resposta (máx.)18.55sTempo de resposta (total)51.86s
Inteligência geral
: 4.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)7.29sTempo de resposta (máx.)7.29sTempo de resposta (total)7.29s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.04sTempo de resposta (máx.)2.85sTempo de resposta (total)4.09s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)2.23sTempo de resposta (máx.)2.98sTempo de resposta (total)6.69s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.75sTempo de resposta (máx.)5.75sTempo de resposta (total)5.75s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)24.39sTempo de resposta (máx.)24.39sTempo de resposta (total)24.39s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 6Resposta incorreta: 3Tempo de resposta (médio)34.40sTempo de resposta (máx.)236.64sTempo de resposta (total)791.16s…
Tarefas de agentes
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)525msTempo de resposta (máx.)525msTempo de resposta (total)525ms
Truques anti-IA
: 8.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)6.04sTempo de resposta (máx.)13.58sTempo de resposta (total)24.14s
Programação
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)40.90sTempo de resposta (máx.)52.61sTempo de resposta (total)122.71s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)51.45sTempo de resposta (máx.)55.44sTempo de resposta (total)102.90s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.90sTempo de resposta (máx.)9.31sTempo de resposta (total)13.80s
Específico do domínio
: 3.6 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Erro de API: 1Tempo de resposta (médio)150.71sTempo de resposta (máx.)236.64sTempo de resposta (total)452.14s
Inteligência geral
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.77sTempo de resposta (máx.)5.77sTempo de resposta (total)5.77s
Seguimento de instruções
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)2.64sTempo de resposta (máx.)4.79sTempo de resposta (total)5.27s
Resolução de quebra-cabeças
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 2Tempo de resposta (médio)3.53sTempo de resposta (máx.)9.25sTempo de resposta (total)10.58s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)27.97sTempo de resposta (máx.)27.97sTempo de resposta (total)27.97s
Conhecimentos gerais
: 2.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)25.37sTempo de resposta (máx.)25.37sTempo de resposta (total)25.37s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)107.36sTempo de resposta (máx.)107.36sTempo de resposta (total)107.36s
Truques anti-IA
: 9.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)7.36sTempo de resposta (máx.)12.64sTempo de resposta (total)29.44s
Programação
: 8.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)33.67sTempo de resposta (máx.)43.94sTempo de resposta (total)101.00s
Combinado
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)76.48sTempo de resposta (máx.)106.02sTempo de resposta (total)152.97s
Análise e extração de dados
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)7.20sTempo de resposta (máx.)9.97sTempo de resposta (total)14.40s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)44.62sTempo de resposta (máx.)102.94sTempo de resposta (total)133.85s
Inteligência geral
: 4.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)5.16sTempo de resposta (máx.)5.16sTempo de resposta (total)5.16s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.34sTempo de resposta (máx.)6.25sTempo de resposta (total)10.69s
Resolução de quebra-cabeças
: 6.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)64.73sTempo de resposta (máx.)181.08sTempo de resposta (total)194.18s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.64sTempo de resposta (máx.)5.64sTempo de resposta (total)5.64s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)26.69sTempo de resposta (máx.)26.69sTempo de resposta (total)26.69s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)106.71sTempo de resposta (máx.)106.71sTempo de resposta (total)106.71s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)10.29sTempo de resposta (máx.)17.58sTempo de resposta (total)41.18s
Programação
: 6.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)42.36sTempo de resposta (máx.)61.83sTempo de resposta (total)127.09s
Combinado
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)217.77sTempo de resposta (máx.)394.54sTempo de resposta (total)435.53s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)15.44sTempo de resposta (máx.)17.97sTempo de resposta (total)30.88s
Específico do domínio
: 3.6 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)37.60sTempo de resposta (máx.)49.39sTempo de resposta (total)112.81s
Inteligência geral
: 4.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)14.37sTempo de resposta (máx.)14.37sTempo de resposta (total)14.37s
Seguimento de instruções
: 8.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)9.88sTempo de resposta (máx.)11.25sTempo de resposta (total)19.75s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)7.66sTempo de resposta (máx.)7.66sTempo de resposta (total)7.66s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)18.42sTempo de resposta (máx.)18.42sTempo de resposta (total)18.42s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 8Tempo esgotado: 1Tempo de resposta (médio)54.06sTempo de resposta (máx.)203.01sTempo de resposta (total)1189.36s…
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)203.01sTempo de resposta (máx.)203.01sTempo de resposta (total)203.01s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)10.84sTempo de resposta (máx.)15.11sTempo de resposta (total)43.36s
Programação
: 6.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)125.25sTempo de resposta (máx.)189.38sTempo de resposta (total)375.76s
Combinado
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Tempo esgotado: 1Tempo de resposta (médio)92.41sTempo de resposta (máx.)92.41sTempo de resposta (total)92.41s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)38.32sTempo de resposta (máx.)41.70sTempo de resposta (total)76.63s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)57.36sTempo de resposta (máx.)90.70sTempo de resposta (total)172.08s
Inteligência geral
: 4.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)25.30sTempo de resposta (máx.)25.30sTempo de resposta (total)25.30s
Seguimento de instruções
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)20.25sTempo de resposta (máx.)21.65sTempo de resposta (total)40.50s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)17.67sTempo de resposta (máx.)24.83sTempo de resposta (total)53.02s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)14.72sTempo de resposta (máx.)14.72sTempo de resposta (total)14.72s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)92.57sTempo de resposta (máx.)92.57sTempo de resposta (total)92.57s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)47.70sTempo de resposta (máx.)47.70sTempo de resposta (total)47.70s
Truques anti-IA
: 8.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)2.36sTempo de resposta (máx.)3.39sTempo de resposta (total)9.44s
Programação
: 6.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)7.16sTempo de resposta (máx.)8.94sTempo de resposta (total)21.47s
Combinado
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)20.29sTempo de resposta (máx.)26.07sTempo de resposta (total)40.58s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.43sTempo de resposta (máx.)3.56sTempo de resposta (total)6.87s
Inteligência geral
: 3.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)5.17sTempo de resposta (máx.)5.17sTempo de resposta (total)5.17s
Seguimento de instruções
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.01sTempo de resposta (máx.)3.29sTempo de resposta (total)6.02s
Resolução de quebra-cabeças
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)2.67sTempo de resposta (máx.)3.28sTempo de resposta (total)8.01s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.02sTempo de resposta (máx.)5.02sTempo de resposta (total)5.02s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)3.12sTempo de resposta (máx.)3.12sTempo de resposta (total)3.12s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)113.57sTempo de resposta (máx.)113.57sTempo de resposta (total)113.57s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.94sTempo de resposta (máx.)13.09sTempo de resposta (total)23.78s
Programação
: 5.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 2Tempo de resposta (médio)278.59sTempo de resposta (máx.)527.47sTempo de resposta (total)835.78s
Combinado
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)112.20sTempo de resposta (máx.)162.41sTempo de resposta (total)224.40s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.69sTempo de resposta (máx.)7.91sTempo de resposta (total)13.38s
Específico do domínio
: 3.6 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Erro de API: 1Tempo de resposta (médio)196.68sTempo de resposta (máx.)270.29sTempo de resposta (total)590.03s
Inteligência geral
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)12.72sTempo de resposta (máx.)12.72sTempo de resposta (total)12.72s
Seguimento de instruções
: 9.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)4.34sTempo de resposta (máx.)4.66sTempo de resposta (total)8.68s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)11.82sTempo de resposta (máx.)28.85sTempo de resposta (total)35.47s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)36.33sTempo de resposta (máx.)36.33sTempo de resposta (total)36.33s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)59.55sTempo de resposta (máx.)59.55sTempo de resposta (total)59.55s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)139.73sTempo de resposta (máx.)139.73sTempo de resposta (total)139.73s
Truques anti-IA
: 8.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)13.18sTempo de resposta (máx.)27.66sTempo de resposta (total)52.71s
Programação
: 8.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)95.97sTempo de resposta (máx.)127.91sTempo de resposta (total)287.92s
Combinado
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)115.38sTempo de resposta (máx.)161.28sTempo de resposta (total)230.76s
Análise e extração de dados
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)14.89sTempo de resposta (máx.)16.84sTempo de resposta (total)29.77s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Sem resposta: 1Tempo de resposta (médio)182.58sTempo de resposta (máx.)451.90sTempo de resposta (total)547.75s
Inteligência geral
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)6.36sTempo de resposta (máx.)6.36sTempo de resposta (total)6.36s
Seguimento de instruções
: 8.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)8.62sTempo de resposta (máx.)8.74sTempo de resposta (total)17.23s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.41sTempo de resposta (máx.)6.41sTempo de resposta (total)6.41s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)94.20sTempo de resposta (máx.)94.20sTempo de resposta (total)94.20s
Tarefas de agentes
: 5.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)82.78sTempo de resposta (máx.)82.78sTempo de resposta (total)82.78s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.64sTempo de resposta (máx.)3.26sTempo de resposta (total)10.56s
Programação
: 7.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)24.69sTempo de resposta (máx.)33.57sTempo de resposta (total)74.07s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)21.53sTempo de resposta (máx.)28.77sTempo de resposta (total)43.07s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)24.50sTempo de resposta (máx.)27.15sTempo de resposta (total)48.99s
Específico do domínio
: 5.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)51.14sTempo de resposta (máx.)106.93sTempo de resposta (total)153.41s
Inteligência geral
: 5.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)17.40sTempo de resposta (máx.)17.40sTempo de resposta (total)17.40s
Seguimento de instruções
: 8.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)1.92sTempo de resposta (máx.)2.04sTempo de resposta (total)3.84s
Resolução de quebra-cabeças
: 7.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)7.51sTempo de resposta (máx.)13.60sTempo de resposta (total)22.53s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.96sTempo de resposta (máx.)6.96sTempo de resposta (total)6.96s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.90sTempo de resposta (máx.)4.90sTempo de resposta (total)4.90s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 6Resposta incorreta: 2Tempo de resposta (médio)22.96sTempo de resposta (máx.)143.21sTempo de resposta (total)528.08s…
Tarefas de agentes
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)461msTempo de resposta (máx.)461msTempo de resposta (total)461ms
Truques anti-IA
: 8.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)5.93sTempo de resposta (máx.)11.89sTempo de resposta (total)23.71s
Programação
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)36.94sTempo de resposta (máx.)49.30sTempo de resposta (total)110.81s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)34.90sTempo de resposta (máx.)45.19sTempo de resposta (total)69.81s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)7.09sTempo de resposta (máx.)8.39sTempo de resposta (total)14.18s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Resposta incorreta: 1Tempo de resposta (médio)78.62sTempo de resposta (máx.)143.21sTempo de resposta (total)235.86s
Inteligência geral
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.52sTempo de resposta (máx.)5.52sTempo de resposta (total)5.52s
Seguimento de instruções
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)1.97sTempo de resposta (máx.)3.43sTempo de resposta (total)3.93s
Resolução de quebra-cabeças
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 2Tempo de resposta (médio)3.78sTempo de resposta (máx.)10.03sTempo de resposta (total)11.34s
Chamada de ferramentas
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)23.70sTempo de resposta (máx.)23.70sTempo de resposta (total)23.70s
Conhecimentos gerais
: 2.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)28.77sTempo de resposta (máx.)28.77sTempo de resposta (total)28.77s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)303.26sTempo de resposta (máx.)303.26sTempo de resposta (total)303.26s
Truques anti-IA
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)17.95sTempo de resposta (máx.)46.36sTempo de resposta (total)71.81s
Programação
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 2Tempo de resposta (médio)198.78sTempo de resposta (máx.)288.78sTempo de resposta (total)596.34s
Combinado
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)150.58sTempo de resposta (máx.)270.49sTempo de resposta (total)301.16s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.21sTempo de resposta (máx.)5.51sTempo de resposta (total)10.43s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)203.11sTempo de resposta (máx.)208.43sTempo de resposta (total)609.33s
Inteligência geral
: 6.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)12.16sTempo de resposta (máx.)12.16sTempo de resposta (total)12.16s
Seguimento de instruções
: 8.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Formatação extra: 1Tempo de resposta (médio)2.42sTempo de resposta (máx.)2.86sTempo de resposta (total)4.84s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)65.12sTempo de resposta (máx.)182.97sTempo de resposta (total)195.36s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)4.41sTempo de resposta (máx.)4.41sTempo de resposta (total)4.41s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Tempo esgotado: 1Tempo de resposta (médio)56.64sTempo de resposta (máx.)56.64sTempo de resposta (total)56.64s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 7Tempo de resposta (médio)18.14sTempo de resposta (máx.)205.28sTempo de resposta (total)417.21s…
Tarefas de agentes
: 5.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)61.53sTempo de resposta (máx.)61.53sTempo de resposta (total)61.53s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.75sTempo de resposta (máx.)3.42sTempo de resposta (total)10.99s
Programação
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)13.72sTempo de resposta (máx.)17.72sTempo de resposta (total)41.16s
Combinado
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)12.75sTempo de resposta (máx.)17.34sTempo de resposta (total)25.50s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.44sTempo de resposta (máx.)3.78sTempo de resposta (total)6.88s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)77.09sTempo de resposta (máx.)205.28sTempo de resposta (total)231.27s
Inteligência geral
: 6.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.88sTempo de resposta (máx.)4.88sTempo de resposta (total)4.88s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.80sTempo de resposta (máx.)2.84sTempo de resposta (total)5.59s
Resolução de quebra-cabeças
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.20sTempo de resposta (máx.)5.51sTempo de resposta (total)9.59s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.83sTempo de resposta (máx.)5.83sTempo de resposta (total)5.83s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)13.98sTempo de resposta (máx.)13.98sTempo de resposta (total)13.98s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 9Não seguiu as instruções: 1Tempo de resposta (médio)17.80sTempo de resposta (máx.)206.03sTempo de resposta (total)409.51s…
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)143.11sTempo de resposta (máx.)143.11sTempo de resposta (total)143.11s
Truques anti-IA
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)1.38sTempo de resposta (máx.)2.69sTempo de resposta (total)5.51s
Programação
: 5.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)2.15sTempo de resposta (máx.)4.39sTempo de resposta (total)6.44s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)117.70sTempo de resposta (máx.)206.03sTempo de resposta (total)235.40s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)1.43sTempo de resposta (máx.)1.57sTempo de resposta (total)2.86s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)1.04sTempo de resposta (máx.)1.33sTempo de resposta (total)3.12s
Inteligência geral
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)1.33sTempo de resposta (máx.)1.33sTempo de resposta (total)1.33s
Seguimento de instruções
: 6.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)929msTempo de resposta (máx.)1.05sTempo de resposta (total)1.86s
Resolução de quebra-cabeças
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)1.71sTempo de resposta (máx.)2.65sTempo de resposta (total)5.13s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.54sTempo de resposta (máx.)3.54sTempo de resposta (total)3.54s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)1.21sTempo de resposta (máx.)1.21sTempo de resposta (total)1.21s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 6Não seguiu as instruções: 1Tempo de resposta (médio)74.77sTempo de resposta (máx.)514.35sTempo de resposta (total)1719.73s…
Tarefas de agentes
: 5.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)103.61sTempo de resposta (máx.)103.61sTempo de resposta (total)103.61s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)10.84sTempo de resposta (máx.)16.03sTempo de resposta (total)43.37s
Programação
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)120.05sTempo de resposta (máx.)183.47sTempo de resposta (total)360.14s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)62.66sTempo de resposta (máx.)80.72sTempo de resposta (total)125.33s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)11.46sTempo de resposta (máx.)12.31sTempo de resposta (total)22.92s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)304.33sTempo de resposta (máx.)514.35sTempo de resposta (total)912.98s
Inteligência geral
: 4.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)17.27sTempo de resposta (máx.)17.27sTempo de resposta (total)17.27s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)12.75sTempo de resposta (máx.)17.51sTempo de resposta (total)25.51s
Resolução de quebra-cabeças
: 8.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)16.30sTempo de resposta (máx.)22.22sTempo de resposta (total)48.89s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)12.83sTempo de resposta (máx.)12.83sTempo de resposta (total)12.83s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)46.88sTempo de resposta (máx.)46.88sTempo de resposta (total)46.88s
Tarefas de agentes
: 7.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)93.88sTempo de resposta (máx.)93.88sTempo de resposta (total)93.88s
Truques anti-IA
: 8.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)9.65sTempo de resposta (máx.)35.08sTempo de resposta (total)38.62s
Programação
: 8.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)27.42sTempo de resposta (máx.)60.98sTempo de resposta (total)82.26s
Combinado
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)80.94sTempo de resposta (máx.)152.83sTempo de resposta (total)161.89s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.75sTempo de resposta (máx.)3.35sTempo de resposta (total)5.49s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)27.26sTempo de resposta (máx.)34.06sTempo de resposta (total)81.77s
Inteligência geral
: 4.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)6.85sTempo de resposta (máx.)6.85sTempo de resposta (total)6.85s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)1.83sTempo de resposta (máx.)2.21sTempo de resposta (total)3.65s
Resolução de quebra-cabeças
: 5.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)6.19sTempo de resposta (máx.)12.51sTempo de resposta (total)18.56s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)4.16sTempo de resposta (máx.)4.16sTempo de resposta (total)4.16s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)113.98sTempo de resposta (máx.)113.98sTempo de resposta (total)113.98s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)40.72sTempo de resposta (máx.)40.72sTempo de resposta (total)40.72s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.72sTempo de resposta (máx.)4.84sTempo de resposta (total)14.88s
Programação
: 6.6 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)18.89sTempo de resposta (máx.)26.76sTempo de resposta (total)56.66s
Combinado
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)63.96sTempo de resposta (máx.)97.74sTempo de resposta (total)127.92s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.55sTempo de resposta (máx.)4.03sTempo de resposta (total)7.10s
Inteligência geral
: 6.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)8.00sTempo de resposta (máx.)8.00sTempo de resposta (total)8.00s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.62sTempo de resposta (máx.)3.66sTempo de resposta (total)7.24s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.74sTempo de resposta (máx.)5.81sTempo de resposta (total)14.23s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)17.05sTempo de resposta (máx.)17.05sTempo de resposta (total)17.05s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)21.98sTempo de resposta (máx.)21.98sTempo de resposta (total)21.98s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 6Tempo de resposta (médio)68.44sTempo de resposta (máx.)436.38sTempo de resposta (total)1574.14s…
Tarefas de agentes
: 5.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)65.24sTempo de resposta (máx.)65.24sTempo de resposta (total)65.24s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)23.50sTempo de resposta (máx.)47.78sTempo de resposta (total)93.99s
Programação
: 7.6 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)155.69sTempo de resposta (máx.)305.49sTempo de resposta (total)467.06s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)29.01sTempo de resposta (máx.)42.36sTempo de resposta (total)58.01s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.29sTempo de resposta (máx.)6.68sTempo de resposta (total)12.58s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)249.34sTempo de resposta (máx.)436.38sTempo de resposta (total)748.02s
Inteligência geral
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)12.84sTempo de resposta (máx.)12.84sTempo de resposta (total)12.84s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.06sTempo de resposta (máx.)7.94sTempo de resposta (total)12.12s
Resolução de quebra-cabeças
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)7.75sTempo de resposta (máx.)12.42sTempo de resposta (total)23.26s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.57sTempo de resposta (máx.)6.57sTempo de resposta (total)6.57s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)74.44sTempo de resposta (máx.)74.44sTempo de resposta (total)74.44s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)43.53sTempo de resposta (máx.)43.53sTempo de resposta (total)43.53s
Truques anti-IA
: 8.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)2.10sTempo de resposta (máx.)3.35sTempo de resposta (total)8.39s
Programação
: 4.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 2Não seguiu as instruções: 1Tempo de resposta (médio)196.67sTempo de resposta (máx.)241.99sTempo de resposta (total)590.01s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)37.28sTempo de resposta (máx.)71.21sTempo de resposta (total)74.56s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.20sTempo de resposta (máx.)2.32sTempo de resposta (total)4.40s
Específico do domínio
: 3.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Sem resposta: 1Tempo de resposta (médio)186.02sTempo de resposta (máx.)440.77sTempo de resposta (total)558.07s
Inteligência geral
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.02sTempo de resposta (máx.)2.02sTempo de resposta (total)2.02s
Seguimento de instruções
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)1.12sTempo de resposta (máx.)1.14sTempo de resposta (total)2.25s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.28sTempo de resposta (máx.)2.28sTempo de resposta (total)2.28s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)44.26sTempo de resposta (máx.)44.26sTempo de resposta (total)44.26s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)87.42sTempo de resposta (máx.)87.42sTempo de resposta (total)87.42s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)4.44sTempo de resposta (máx.)7.00sTempo de resposta (total)17.76s
Programação
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Formatação extra: 1Tempo de resposta (médio)83.41sTempo de resposta (máx.)149.10sTempo de resposta (total)250.23s
Combinado
: 6.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)351.19sTempo de resposta (máx.)665.85sTempo de resposta (total)702.38s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)17.38sTempo de resposta (máx.)25.54sTempo de resposta (total)34.77s
Específico do domínio
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 3Tempo de resposta (médio)222.88sTempo de resposta (máx.)293.88sTempo de resposta (total)668.65s
Inteligência geral
: 3.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)7.82sTempo de resposta (máx.)7.82sTempo de resposta (total)7.82s
Seguimento de instruções
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)4.31sTempo de resposta (máx.)5.40sTempo de resposta (total)8.61s
Resolução de quebra-cabeças
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)37.46sTempo de resposta (máx.)103.89sTempo de resposta (total)112.37s
Chamada de ferramentas
: 2.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)38.25sTempo de resposta (máx.)38.25sTempo de resposta (total)38.25s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)81.83sTempo de resposta (máx.)81.83sTempo de resposta (total)81.83s
Tarefas de agentes
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)381msTempo de resposta (máx.)381msTempo de resposta (total)381ms
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)7.00sTempo de resposta (máx.)11.34sTempo de resposta (total)27.99s
Programação
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)58.38sTempo de resposta (máx.)68.45sTempo de resposta (total)175.15s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)62.60sTempo de resposta (máx.)78.52sTempo de resposta (total)125.21s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)7.40sTempo de resposta (máx.)9.53sTempo de resposta (total)14.80s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 2Resposta incorreta: 1Tempo de resposta (médio)189.55sTempo de resposta (máx.)287.79sTempo de resposta (total)568.65s
Inteligência geral
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.06sTempo de resposta (máx.)6.06sTempo de resposta (total)6.06s
Seguimento de instruções
: 7.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)13.24sTempo de resposta (máx.)23.29sTempo de resposta (total)26.47s
Resolução de quebra-cabeças
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)8.97sTempo de resposta (máx.)14.45sTempo de resposta (total)26.92s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)8.08sTempo de resposta (máx.)8.08sTempo de resposta (total)8.08s
Conhecimentos gerais
: 2.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)41.30sTempo de resposta (máx.)41.30sTempo de resposta (total)41.30s
Tendências globais do benchmark
Veja como os modelos atuais equilibram pontuação, custo, velocidade, comprimento da saída e desempenho por categoria.