Navegação
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Opus 4.8 vs Qwen: Qwen3.5-27B

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-06-02

Métrica Claude Opus 4.8 Claude Opus 4.8 none Lançamento: 2026-05-28 Qwen3.5-27B Qwen3.5-27B medium Lançamento: 2026-02-24
Pontuação 7.3 7.9
Posição #66 #27
Confiabilidade 10.0 10.0
Consistência 9.2 8.9
Testes corretos
Taxa de acerto por tentativa 65.0% 73.3%
Testes instáveis 2 3
Execuções totais 60 60
Custo por resultado 4.324 4.532
Custo total $0.519 $0.488
Preço de entrada $5.000 / 1M $0.195 / 1M
Preço de saída $25.000 / 1M $1.560 / 1M
Total de tokens de entrada 63,282 39,329
Tokens de saída 8,098 2,569
Tokens de raciocínio 0 304,894
Tempo de resposta (médio) 3.51s 60.09s
Tempo de resposta (máx.) 17.73s 177.36s
Tempo de resposta (total) 70.19s 1201.89s

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Opus 4.8 6.5 10.0 50.0% 0 3.40s 834 1,472 0
Qwen3.5-27B 8.7 7.9 91.7% 1 19.75s 672 569 31,505
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Opus 4.8 6.8 10.0 50.0% 0 3.59s 6,768 1,323 0
Qwen3.5-27B 7.0 9.8 50.0% 0 123.86s 5,060 416 64,993
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Opus 4.8 9.5 10.0 100.0% 0 17.73s 29,658 3,259 0
Qwen3.5-27B 10.0 10.0 100.0% 0 163.96s 14,946 483 9,991
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Opus 4.8 7.3 5.8 83.3% 1 1.77s 10,503 308 0
Qwen3.5-27B 10.0 10.0 100.0% 0 30.26s 7,782 270 16,150
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Opus 4.8 5.3 7.2 44.4% 1 1.66s 975 61 0
Qwen3.5-27B 5.3 10.0 33.3% 0 79.53s 553 43 52,368
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Opus 4.8 10.0 10.0 100.0% 0 3.48s 708 230 0
Qwen3.5-27B 6.1 3.1 66.7% 1 101.41s 524 70 23,147
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Opus 4.8 9.9 10.0 100.0% 0 1.37s 909 95 0
Qwen3.5-27B 10.0 10.0 100.0% 0 19.66s 699 97 11,638
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Opus 4.8 7.7 10.0 66.7% 0 2.74s 894 783 0
Qwen3.5-27B 8.2 7.7 77.8% 1 59.60s 696 242 70,096
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Opus 4.8 10.0 10.0 100.0% 0 5.35s 11,775 355 0
Qwen3.5-27B 10.0 10.0 100.0% 0 7.45s 8,193 348 1,323
Conhecimentos gerais Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Claude Opus 4.8 3.0 10.0 0.0% 0 3.41s 258 212 0
Qwen3.5-27B 3.0 10.0 0.0% 0 85.11s 204 31 23,683

Comparação rápida

Trocar par de comparação