Tarefas de agentes
: 2.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)84.47sTempo de resposta (máx.)84.47sTempo de resposta (total)84.47s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.09sTempo de resposta (máx.)2.56sTempo de resposta (total)8.35s
Programação
: 7.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)12.63sTempo de resposta (máx.)18.07sTempo de resposta (total)37.89s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)44.36sTempo de resposta (máx.)76.68sTempo de resposta (total)88.72s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)4.07sTempo de resposta (máx.)5.60sTempo de resposta (total)8.14s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)7.28sTempo de resposta (máx.)10.39sTempo de resposta (total)21.83s
Inteligência geral
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.52sTempo de resposta (máx.)2.52sTempo de resposta (total)2.52s
Seguimento de instruções
: 9.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.70sTempo de resposta (máx.)3.07sTempo de resposta (total)5.40s
Resolução de quebra-cabeças
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)2.38sTempo de resposta (máx.)2.55sTempo de resposta (total)7.15s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.81sTempo de resposta (máx.)3.81sTempo de resposta (total)3.81s
Conhecimentos gerais
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.75sTempo de resposta (máx.)2.75sTempo de resposta (total)2.75s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)127.11sTempo de resposta (máx.)127.11sTempo de resposta (total)127.11s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)24.22sTempo de resposta (máx.)63.59sTempo de resposta (total)96.87s
Programação
: 5.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Sem resposta: 1Tempo de resposta (médio)160.52sTempo de resposta (máx.)311.89sTempo de resposta (total)481.57s
Combinado
: 6.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)266.12sTempo de resposta (máx.)328.22sTempo de resposta (total)532.25s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)13.67sTempo de resposta (máx.)19.13sTempo de resposta (total)27.34s
Específico do domínio
: 4.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)301.08sTempo de resposta (máx.)532.28sTempo de resposta (total)903.25s
Inteligência geral
: 6.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)11.38sTempo de resposta (máx.)11.38sTempo de resposta (total)11.38s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)11.45sTempo de resposta (máx.)15.77sTempo de resposta (total)22.90s
Resolução de quebra-cabeças
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)65.54sTempo de resposta (máx.)156.63sTempo de resposta (total)196.61s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)32.93sTempo de resposta (máx.)32.93sTempo de resposta (total)32.93s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)347.95sTempo de resposta (máx.)347.95sTempo de resposta (total)347.95s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)90.14sTempo de resposta (máx.)90.14sTempo de resposta (total)90.14s
Programação
: 7.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Formatação extra: 1Resposta incorreta: 1Tempo de resposta (médio)18.23sTempo de resposta (máx.)35.23sTempo de resposta (total)54.68s
Combinado
: 7.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)20.70sTempo de resposta (máx.)33.19sTempo de resposta (total)41.40s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)1.75sTempo de resposta (máx.)2.25sTempo de resposta (total)3.51s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Resposta incorreta: 1Tempo de resposta (médio)235.06sTempo de resposta (máx.)316.42sTempo de resposta (total)705.19s
Inteligência geral
: 4.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)2.34sTempo de resposta (máx.)2.34sTempo de resposta (total)2.34s
Seguimento de instruções
: 9.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)1.13sTempo de resposta (máx.)1.15sTempo de resposta (total)2.25s
Resolução de quebra-cabeças
: 7.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)52.85sTempo de resposta (máx.)155.38sTempo de resposta (total)158.56s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.63sTempo de resposta (máx.)2.63sTempo de resposta (total)2.63s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)357.28sTempo de resposta (máx.)357.28sTempo de resposta (total)357.28s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 6Tempo de resposta (médio)68.44sTempo de resposta (máx.)436.38sTempo de resposta (total)1574.14s…
Tarefas de agentes
: 5.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)65.24sTempo de resposta (máx.)65.24sTempo de resposta (total)65.24s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)23.50sTempo de resposta (máx.)47.78sTempo de resposta (total)93.99s
Programação
: 7.6 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)155.69sTempo de resposta (máx.)305.49sTempo de resposta (total)467.06s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)29.01sTempo de resposta (máx.)42.36sTempo de resposta (total)58.01s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.29sTempo de resposta (máx.)6.68sTempo de resposta (total)12.58s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)249.34sTempo de resposta (máx.)436.38sTempo de resposta (total)748.02s
Inteligência geral
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)12.84sTempo de resposta (máx.)12.84sTempo de resposta (total)12.84s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.06sTempo de resposta (máx.)7.94sTempo de resposta (total)12.12s
Resolução de quebra-cabeças
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)7.75sTempo de resposta (máx.)12.42sTempo de resposta (total)23.26s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.57sTempo de resposta (máx.)6.57sTempo de resposta (total)6.57s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)74.44sTempo de resposta (máx.)74.44sTempo de resposta (total)74.44s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)40.72sTempo de resposta (máx.)40.72sTempo de resposta (total)40.72s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.72sTempo de resposta (máx.)4.84sTempo de resposta (total)14.88s
Programação
: 6.6 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)18.89sTempo de resposta (máx.)26.76sTempo de resposta (total)56.66s
Combinado
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)63.96sTempo de resposta (máx.)97.74sTempo de resposta (total)127.92s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.55sTempo de resposta (máx.)4.03sTempo de resposta (total)7.10s
Inteligência geral
: 6.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)8.00sTempo de resposta (máx.)8.00sTempo de resposta (total)8.00s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.62sTempo de resposta (máx.)3.66sTempo de resposta (total)7.24s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.74sTempo de resposta (máx.)5.81sTempo de resposta (total)14.23s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)17.05sTempo de resposta (máx.)17.05sTempo de resposta (total)17.05s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)21.98sTempo de resposta (máx.)21.98sTempo de resposta (total)21.98s
Tarefas de agentes
: 7.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)93.88sTempo de resposta (máx.)93.88sTempo de resposta (total)93.88s
Truques anti-IA
: 8.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)9.65sTempo de resposta (máx.)35.08sTempo de resposta (total)38.62s
Programação
: 8.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)27.42sTempo de resposta (máx.)60.98sTempo de resposta (total)82.26s
Combinado
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)80.94sTempo de resposta (máx.)152.83sTempo de resposta (total)161.89s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.75sTempo de resposta (máx.)3.35sTempo de resposta (total)5.49s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)27.26sTempo de resposta (máx.)34.06sTempo de resposta (total)81.77s
Inteligência geral
: 4.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)6.85sTempo de resposta (máx.)6.85sTempo de resposta (total)6.85s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)1.83sTempo de resposta (máx.)2.21sTempo de resposta (total)3.65s
Resolução de quebra-cabeças
: 5.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)6.19sTempo de resposta (máx.)12.51sTempo de resposta (total)18.56s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)4.16sTempo de resposta (máx.)4.16sTempo de resposta (total)4.16s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)113.98sTempo de resposta (máx.)113.98sTempo de resposta (total)113.98s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 6Não seguiu as instruções: 1Tempo de resposta (médio)74.77sTempo de resposta (máx.)514.35sTempo de resposta (total)1719.73s…
Tarefas de agentes
: 5.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)103.61sTempo de resposta (máx.)103.61sTempo de resposta (total)103.61s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)10.84sTempo de resposta (máx.)16.03sTempo de resposta (total)43.37s
Programação
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)120.05sTempo de resposta (máx.)183.47sTempo de resposta (total)360.14s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)62.66sTempo de resposta (máx.)80.72sTempo de resposta (total)125.33s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)11.46sTempo de resposta (máx.)12.31sTempo de resposta (total)22.92s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)304.33sTempo de resposta (máx.)514.35sTempo de resposta (total)912.98s
Inteligência geral
: 4.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)17.27sTempo de resposta (máx.)17.27sTempo de resposta (total)17.27s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)12.75sTempo de resposta (máx.)17.51sTempo de resposta (total)25.51s
Resolução de quebra-cabeças
: 8.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)16.30sTempo de resposta (máx.)22.22sTempo de resposta (total)48.89s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)12.83sTempo de resposta (máx.)12.83sTempo de resposta (total)12.83s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)46.88sTempo de resposta (máx.)46.88sTempo de resposta (total)46.88s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 9Não seguiu as instruções: 1Tempo de resposta (médio)17.80sTempo de resposta (máx.)206.03sTempo de resposta (total)409.51s…
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)143.11sTempo de resposta (máx.)143.11sTempo de resposta (total)143.11s
Truques anti-IA
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)1.38sTempo de resposta (máx.)2.69sTempo de resposta (total)5.51s
Programação
: 5.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)2.15sTempo de resposta (máx.)4.39sTempo de resposta (total)6.44s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)117.70sTempo de resposta (máx.)206.03sTempo de resposta (total)235.40s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)1.43sTempo de resposta (máx.)1.57sTempo de resposta (total)2.86s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)1.04sTempo de resposta (máx.)1.33sTempo de resposta (total)3.12s
Inteligência geral
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)1.33sTempo de resposta (máx.)1.33sTempo de resposta (total)1.33s
Seguimento de instruções
: 6.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)929msTempo de resposta (máx.)1.05sTempo de resposta (total)1.86s
Resolução de quebra-cabeças
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)1.71sTempo de resposta (máx.)2.65sTempo de resposta (total)5.13s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.54sTempo de resposta (máx.)3.54sTempo de resposta (total)3.54s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)1.21sTempo de resposta (máx.)1.21sTempo de resposta (total)1.21s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 7Tempo de resposta (médio)18.14sTempo de resposta (máx.)205.28sTempo de resposta (total)417.21s…
Tarefas de agentes
: 5.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)61.53sTempo de resposta (máx.)61.53sTempo de resposta (total)61.53s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.75sTempo de resposta (máx.)3.42sTempo de resposta (total)10.99s
Programação
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)13.72sTempo de resposta (máx.)17.72sTempo de resposta (total)41.16s
Combinado
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)12.75sTempo de resposta (máx.)17.34sTempo de resposta (total)25.50s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.44sTempo de resposta (máx.)3.78sTempo de resposta (total)6.88s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)77.09sTempo de resposta (máx.)205.28sTempo de resposta (total)231.27s
Inteligência geral
: 6.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.88sTempo de resposta (máx.)4.88sTempo de resposta (total)4.88s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.80sTempo de resposta (máx.)2.84sTempo de resposta (total)5.59s
Resolução de quebra-cabeças
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.20sTempo de resposta (máx.)5.51sTempo de resposta (total)9.59s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.83sTempo de resposta (máx.)5.83sTempo de resposta (total)5.83s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)13.98sTempo de resposta (máx.)13.98sTempo de resposta (total)13.98s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)303.26sTempo de resposta (máx.)303.26sTempo de resposta (total)303.26s
Truques anti-IA
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)17.95sTempo de resposta (máx.)46.36sTempo de resposta (total)71.81s
Programação
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 2Tempo de resposta (médio)198.78sTempo de resposta (máx.)288.78sTempo de resposta (total)596.34s
Combinado
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)150.58sTempo de resposta (máx.)270.49sTempo de resposta (total)301.16s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.21sTempo de resposta (máx.)5.51sTempo de resposta (total)10.43s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)203.11sTempo de resposta (máx.)208.43sTempo de resposta (total)609.33s
Inteligência geral
: 6.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)12.16sTempo de resposta (máx.)12.16sTempo de resposta (total)12.16s
Seguimento de instruções
: 8.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Formatação extra: 1Tempo de resposta (médio)2.42sTempo de resposta (máx.)2.86sTempo de resposta (total)4.84s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)65.12sTempo de resposta (máx.)182.97sTempo de resposta (total)195.36s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)4.41sTempo de resposta (máx.)4.41sTempo de resposta (total)4.41s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Tempo esgotado: 1Tempo de resposta (médio)56.64sTempo de resposta (máx.)56.64sTempo de resposta (total)56.64s
Tarefas de agentes
: 5.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)82.78sTempo de resposta (máx.)82.78sTempo de resposta (total)82.78s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.64sTempo de resposta (máx.)3.26sTempo de resposta (total)10.56s
Programação
: 7.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)24.69sTempo de resposta (máx.)33.57sTempo de resposta (total)74.07s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)21.53sTempo de resposta (máx.)28.77sTempo de resposta (total)43.07s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)24.50sTempo de resposta (máx.)27.15sTempo de resposta (total)48.99s
Específico do domínio
: 5.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)51.14sTempo de resposta (máx.)106.93sTempo de resposta (total)153.41s
Inteligência geral
: 5.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)17.40sTempo de resposta (máx.)17.40sTempo de resposta (total)17.40s
Seguimento de instruções
: 8.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)1.92sTempo de resposta (máx.)2.04sTempo de resposta (total)3.84s
Resolução de quebra-cabeças
: 7.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)7.51sTempo de resposta (máx.)13.60sTempo de resposta (total)22.53s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.96sTempo de resposta (máx.)6.96sTempo de resposta (total)6.96s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.90sTempo de resposta (máx.)4.90sTempo de resposta (total)4.90s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)139.73sTempo de resposta (máx.)139.73sTempo de resposta (total)139.73s
Truques anti-IA
: 8.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)13.18sTempo de resposta (máx.)27.66sTempo de resposta (total)52.71s
Programação
: 8.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)95.97sTempo de resposta (máx.)127.91sTempo de resposta (total)287.92s
Combinado
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)115.38sTempo de resposta (máx.)161.28sTempo de resposta (total)230.76s
Análise e extração de dados
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)14.89sTempo de resposta (máx.)16.84sTempo de resposta (total)29.77s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Sem resposta: 1Tempo de resposta (médio)182.58sTempo de resposta (máx.)451.90sTempo de resposta (total)547.75s
Inteligência geral
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)6.36sTempo de resposta (máx.)6.36sTempo de resposta (total)6.36s
Seguimento de instruções
: 8.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)8.62sTempo de resposta (máx.)8.74sTempo de resposta (total)17.23s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.41sTempo de resposta (máx.)6.41sTempo de resposta (total)6.41s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)94.20sTempo de resposta (máx.)94.20sTempo de resposta (total)94.20s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 8Tempo esgotado: 1Tempo de resposta (médio)54.06sTempo de resposta (máx.)203.01sTempo de resposta (total)1189.36s…
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)203.01sTempo de resposta (máx.)203.01sTempo de resposta (total)203.01s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)10.84sTempo de resposta (máx.)15.11sTempo de resposta (total)43.36s
Programação
: 6.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)125.25sTempo de resposta (máx.)189.38sTempo de resposta (total)375.76s
Combinado
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Tempo esgotado: 1Tempo de resposta (médio)92.41sTempo de resposta (máx.)92.41sTempo de resposta (total)92.41s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)38.32sTempo de resposta (máx.)41.70sTempo de resposta (total)76.63s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)57.36sTempo de resposta (máx.)90.70sTempo de resposta (total)172.08s
Inteligência geral
: 4.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)25.30sTempo de resposta (máx.)25.30sTempo de resposta (total)25.30s
Seguimento de instruções
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)20.25sTempo de resposta (máx.)21.65sTempo de resposta (total)40.50s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)17.67sTempo de resposta (máx.)24.83sTempo de resposta (total)53.02s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)14.72sTempo de resposta (máx.)14.72sTempo de resposta (total)14.72s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)92.57sTempo de resposta (máx.)92.57sTempo de resposta (total)92.57s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)106.71sTempo de resposta (máx.)106.71sTempo de resposta (total)106.71s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)10.29sTempo de resposta (máx.)17.58sTempo de resposta (total)41.18s
Programação
: 6.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)42.36sTempo de resposta (máx.)61.83sTempo de resposta (total)127.09s
Combinado
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)217.77sTempo de resposta (máx.)394.54sTempo de resposta (total)435.53s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)15.44sTempo de resposta (máx.)17.97sTempo de resposta (total)30.88s
Específico do domínio
: 3.6 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)37.60sTempo de resposta (máx.)49.39sTempo de resposta (total)112.81s
Inteligência geral
: 4.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)14.37sTempo de resposta (máx.)14.37sTempo de resposta (total)14.37s
Seguimento de instruções
: 8.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)9.88sTempo de resposta (máx.)11.25sTempo de resposta (total)19.75s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)7.66sTempo de resposta (máx.)7.66sTempo de resposta (total)7.66s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)18.42sTempo de resposta (máx.)18.42sTempo de resposta (total)18.42s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)107.36sTempo de resposta (máx.)107.36sTempo de resposta (total)107.36s
Truques anti-IA
: 9.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)7.36sTempo de resposta (máx.)12.64sTempo de resposta (total)29.44s
Programação
: 8.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)33.67sTempo de resposta (máx.)43.94sTempo de resposta (total)101.00s
Combinado
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)76.48sTempo de resposta (máx.)106.02sTempo de resposta (total)152.97s
Análise e extração de dados
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)7.20sTempo de resposta (máx.)9.97sTempo de resposta (total)14.40s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)44.62sTempo de resposta (máx.)102.94sTempo de resposta (total)133.85s
Inteligência geral
: 4.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)5.16sTempo de resposta (máx.)5.16sTempo de resposta (total)5.16s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.34sTempo de resposta (máx.)6.25sTempo de resposta (total)10.69s
Resolução de quebra-cabeças
: 6.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)64.73sTempo de resposta (máx.)181.08sTempo de resposta (total)194.18s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.64sTempo de resposta (máx.)5.64sTempo de resposta (total)5.64s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)26.69sTempo de resposta (máx.)26.69sTempo de resposta (total)26.69s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)51.03sTempo de resposta (máx.)51.03sTempo de resposta (total)51.03s
Truques anti-IA
: 6.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Resposta incorreta: 1Tempo de resposta (médio)11.00sTempo de resposta (máx.)21.96sTempo de resposta (total)44.00s
Programação
: 6.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)15.39sTempo de resposta (máx.)23.64sTempo de resposta (total)46.16s
Combinado
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)49.77sTempo de resposta (máx.)89.37sTempo de resposta (total)99.54s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)9.94sTempo de resposta (máx.)17.89sTempo de resposta (total)19.89s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)18.09sTempo de resposta (máx.)27.87sTempo de resposta (total)54.28s
Inteligência geral
: 4.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)1.46sTempo de resposta (máx.)1.46sTempo de resposta (total)1.46s
Seguimento de instruções
: 7.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)17.38sTempo de resposta (máx.)17.50sTempo de resposta (total)34.76s
Resolução de quebra-cabeças
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)27.45sTempo de resposta (máx.)30.30sTempo de resposta (total)82.36s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)71.65sTempo de resposta (máx.)71.65sTempo de resposta (total)71.65s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)29.10sTempo de resposta (máx.)29.10sTempo de resposta (total)29.10s
~$0.089A estimativa inclui apenas a eletricidade da GPU. Exclui o resto do computador e a aquisição do hardware. NVIDIA GeForce RTX 3090: 0.8932 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.088310.
Tarefas de agentes
: 6.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)211.32sTempo de resposta (máx.)211.32sTempo de resposta (total)211.32s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.02sTempo de resposta (máx.)5.68sTempo de resposta (total)12.07s
Programação
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)140.92sTempo de resposta (máx.)376.04sTempo de resposta (total)422.75s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)90.63sTempo de resposta (máx.)143.71sTempo de resposta (total)181.27s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)8.03sTempo de resposta (máx.)9.09sTempo de resposta (total)16.06s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)60.78sTempo de resposta (máx.)120.94sTempo de resposta (total)182.34s
Inteligência geral
: 5.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)5.37sTempo de resposta (máx.)5.37sTempo de resposta (total)5.37s
Seguimento de instruções
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.43sTempo de resposta (máx.)2.87sTempo de resposta (total)4.86s
Resolução de quebra-cabeças
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.91sTempo de resposta (máx.)8.81sTempo de resposta (total)14.74s
Chamada de ferramentas
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)8.42sTempo de resposta (máx.)8.42sTempo de resposta (total)8.42s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)12.64sTempo de resposta (máx.)12.64sTempo de resposta (total)12.64s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 10Tempo de resposta (médio)29.38sTempo de resposta (máx.)234.56sTempo de resposta (total)675.79s…
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)73.43sTempo de resposta (máx.)73.43sTempo de resposta (total)73.43s
Truques anti-IA
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)3.48sTempo de resposta (máx.)7.38sTempo de resposta (total)13.91s
Programação
: 6.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)8.29sTempo de resposta (máx.)10.90sTempo de resposta (total)24.86s
Combinado
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)19.30sTempo de resposta (máx.)33.65sTempo de resposta (total)38.60s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)1.91sTempo de resposta (máx.)2.40sTempo de resposta (total)3.82s
Específico do domínio
: 7.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)85.05sTempo de resposta (máx.)133.95sTempo de resposta (total)255.16s
Inteligência geral
: 4.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.75sTempo de resposta (máx.)4.75sTempo de resposta (total)4.75s
Seguimento de instruções
: 6.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)2.04sTempo de resposta (máx.)2.33sTempo de resposta (total)4.08s
Resolução de quebra-cabeças
: 8.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)6.43sTempo de resposta (máx.)14.39sTempo de resposta (total)19.28s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.34sTempo de resposta (máx.)3.34sTempo de resposta (total)3.34s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)234.56sTempo de resposta (máx.)234.56sTempo de resposta (total)234.56s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)225.59sTempo de resposta (máx.)225.59sTempo de resposta (total)225.59s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)8.31sTempo de resposta (máx.)14.20sTempo de resposta (total)33.24s
Combinado
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)175.93sTempo de resposta (máx.)308.75sTempo de resposta (total)351.86s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)9.33sTempo de resposta (máx.)9.40sTempo de resposta (total)18.66s
Inteligência geral
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)20.95sTempo de resposta (máx.)20.95sTempo de resposta (total)20.95s
Seguimento de instruções
: 6.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)7.47sTempo de resposta (máx.)10.16sTempo de resposta (total)14.94s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)31.64sTempo de resposta (máx.)46.04sTempo de resposta (total)94.91s
Chamada de ferramentas
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)0msTempo de resposta (máx.)0msTempo de resposta (total)0ms
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)29.40sTempo de resposta (máx.)29.40sTempo de resposta (total)29.40s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)64.52sTempo de resposta (máx.)64.52sTempo de resposta (total)64.52s
Truques anti-IA
: 6.6 Um teste é totalmente aprovado apenas quando todas as execuções passam.Tempo esgotado: 1Resposta incorreta: 1Tempo de resposta (médio)74.75sTempo de resposta (máx.)182.10sTempo de resposta (total)298.98s
Programação
: 5.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Tempo esgotado: 1Resposta incorreta: 1Tempo de resposta (médio)220.48sTempo de resposta (máx.)243.66sTempo de resposta (total)440.97s
Combinado
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)282.30sTempo de resposta (máx.)301.78sTempo de resposta (total)564.61s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)24.27sTempo de resposta (máx.)27.52sTempo de resposta (total)48.54s
Inteligência geral
: 5.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)36.65sTempo de resposta (máx.)36.65sTempo de resposta (total)36.65s
Seguimento de instruções
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)17.47sTempo de resposta (máx.)19.46sTempo de resposta (total)34.93s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)31.79sTempo de resposta (máx.)50.78sTempo de resposta (total)95.38s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)88.68sTempo de resposta (máx.)88.68sTempo de resposta (total)88.68s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)56.76sTempo de resposta (máx.)56.76sTempo de resposta (total)56.76s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)139.94sTempo de resposta (máx.)139.94sTempo de resposta (total)139.94s
Truques anti-IA
: 8.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)35.07sTempo de resposta (máx.)82.43sTempo de resposta (total)140.28s
Combinado
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)144.87sTempo de resposta (máx.)236.85sTempo de resposta (total)289.75s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)24.28sTempo de resposta (máx.)34.05sTempo de resposta (total)48.55s
Específico do domínio
: 3.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Sem resposta: 1Tempo de resposta (médio)419.73sTempo de resposta (máx.)675.30sTempo de resposta (total)1259.19s
Inteligência geral
: 4.6 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)36.45sTempo de resposta (máx.)36.45sTempo de resposta (total)36.45s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)11.26sTempo de resposta (máx.)19.26sTempo de resposta (total)22.53s
Resolução de quebra-cabeças
: 7.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)15.91sTempo de resposta (máx.)17.11sTempo de resposta (total)47.73s
Chamada de ferramentas
: 4.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)35.09sTempo de resposta (máx.)35.09sTempo de resposta (total)35.09s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)52.23sTempo de resposta (máx.)52.23sTempo de resposta (total)52.23s
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 9Chamada de ferramenta inválida: 1Tempo de resposta (médio)9.64sTempo de resposta (máx.)58.09sTempo de resposta (total)221.62s…
Tarefas de agentes
: 7.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)58.09sTempo de resposta (máx.)58.09sTempo de resposta (total)58.09s
Truques anti-IA
: 8.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)2.52sTempo de resposta (máx.)3.90sTempo de resposta (total)10.08s
Programação
: 5.4 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)10.38sTempo de resposta (máx.)17.15sTempo de resposta (total)31.15s
Combinado
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)14.59sTempo de resposta (máx.)19.65sTempo de resposta (total)29.17s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)1.95sTempo de resposta (máx.)2.42sTempo de resposta (total)3.89s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)18.45sTempo de resposta (máx.)29.85sTempo de resposta (total)55.36s
Inteligência geral
: 5.1 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.34sTempo de resposta (máx.)4.34sTempo de resposta (total)4.34s
Seguimento de instruções
: 9.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)2.38sTempo de resposta (máx.)3.43sTempo de resposta (total)4.77s
Resolução de quebra-cabeças
: 7.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)4.04sTempo de resposta (máx.)6.14sTempo de resposta (total)12.12s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.02sTempo de resposta (máx.)6.02sTempo de resposta (total)6.02s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)6.64sTempo de resposta (máx.)6.64sTempo de resposta (total)6.64s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)56.13sTempo de resposta (máx.)56.13sTempo de resposta (total)56.13s
Truques anti-IA
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.10sTempo de resposta (máx.)9.60sTempo de resposta (total)24.39s
Programação
: 5.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)42.85sTempo de resposta (máx.)78.01sTempo de resposta (total)128.55s
Combinado
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)299.21sTempo de resposta (máx.)578.13sTempo de resposta (total)598.41s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)9.65sTempo de resposta (máx.)10.35sTempo de resposta (total)19.31s
Específico do domínio
: 2.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)16.98sTempo de resposta (máx.)26.85sTempo de resposta (total)50.95s
Inteligência geral
: 4.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)9.88sTempo de resposta (máx.)9.88sTempo de resposta (total)9.88s
Seguimento de instruções
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.05sTempo de resposta (máx.)6.94sTempo de resposta (total)12.10s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)6.29sTempo de resposta (máx.)8.18sTempo de resposta (total)18.87s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)4.00sTempo de resposta (máx.)4.00sTempo de resposta (total)4.00s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)122.87sTempo de resposta (máx.)122.87sTempo de resposta (total)122.87s
Tarefas de agentes
: 4.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)321.18sTempo de resposta (máx.)321.18sTempo de resposta (total)321.18s
Truques anti-IA
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)10.08sTempo de resposta (máx.)24.45sTempo de resposta (total)40.32s
Programação
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Resposta incorreta: 1Tempo de resposta (médio)163.31sTempo de resposta (máx.)438.65sTempo de resposta (total)489.94s
Combinado
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)54.25sTempo de resposta (máx.)73.69sTempo de resposta (total)108.49s
Análise e extração de dados
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)4.35sTempo de resposta (máx.)5.29sTempo de resposta (total)8.71s
Específico do domínio
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 3Tempo de resposta (médio)255.51sTempo de resposta (máx.)411.82sTempo de resposta (total)766.52s
Inteligência geral
: 6.5 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)7.63sTempo de resposta (máx.)7.63sTempo de resposta (total)7.63s
Seguimento de instruções
: 9.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)3.01sTempo de resposta (máx.)3.92sTempo de resposta (total)6.03s
Resolução de quebra-cabeças
: 8.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)9.08sTempo de resposta (máx.)12.40sTempo de resposta (total)27.25s
Chamada de ferramentas
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)4.44sTempo de resposta (máx.)4.44sTempo de resposta (total)4.44s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)246.86sTempo de resposta (máx.)246.86sTempo de resposta (total)246.86s
Tarefas de agentes
: 10.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)91.69sTempo de resposta (máx.)91.69sTempo de resposta (total)91.69s
Truques anti-IA
: 6.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)45.98sTempo de resposta (máx.)130.73sTempo de resposta (total)183.93s
Programação
: 8.9 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)89.94sTempo de resposta (máx.)105.48sTempo de resposta (total)269.82s
Combinado
: 4.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 2Tempo de resposta (médio)102.33sTempo de resposta (máx.)177.88sTempo de resposta (total)204.66s
Análise e extração de dados
: 7.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)18.78sTempo de resposta (máx.)27.01sTempo de resposta (total)37.56s
Específico do domínio
: 5.3 Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 2Tempo de resposta (médio)429.77sTempo de resposta (máx.)626.58sTempo de resposta (total)1289.31s
Inteligência geral
: 4.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Tempo de resposta (médio)11.41sTempo de resposta (máx.)11.41sTempo de resposta (total)11.41s
Seguimento de instruções
: 9.8 Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)10.34sTempo de resposta (máx.)15.43sTempo de resposta (total)20.67s
Resolução de quebra-cabeças
: 8.2 Um teste é totalmente aprovado apenas quando todas as execuções passam.Formatação extra: 1Tempo de resposta (médio)34.30sTempo de resposta (máx.)46.61sTempo de resposta (total)102.91s
Chamada de ferramentas
: 4.7 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)36.36sTempo de resposta (máx.)36.36sTempo de resposta (total)36.36s
Conhecimentos gerais
: 3.0 Um teste é totalmente aprovado apenas quando todas as execuções passam.Erro de API: 1Tempo de resposta (médio)66.56sTempo de resposta (máx.)66.56sTempo de resposta (total)66.56s
Tendências globais do benchmark
Veja como os modelos atuais equilibram pontuação, custo, velocidade, comprimento da saída e desempenho por categoria.