#11
Qwen
Lançamento: 2026-02-24
Testado em: 2026-04-11 01:44
qwen/qwen3.5-27b::medium
(medium)
(none)
8.4
Consistência
8.8
$0.497
Total de tokens de saída
245,000
Preço de entrada
$0.195 / 1M
Preço de saída
$1.560 / 1M
Testes instáveis
3
Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).
53.03s
Tempo de resposta (máx.): 163.96s
Tempo de resposta (total): 954.46s
Histórico de execuções
| Testado em | Pontuação | Confiabilidade | Testes corretos | Custo total | Comparar |
|---|---|---|---|---|---|
| 2026-05-22 00:04 Suite alterada | 7.9 | 10.0 | $0.607 | Comparar | |
| 2026-04-11 01:44 Primeira execução registrada | 8.4 | N/D | $0.497 | Execução atual |
Comparação de execuções
| Execução | Pontuação | Consistência | Confiabilidade | Testes corretos | Testes instáveis | Total de tokens de saída | Custo total | Tempo de resposta (médio) |
|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · Primeira execução registrada | 8.4 | 8.8 | N/D | 13/18 | 3 | 245,000 | $0.497 | 53.03s |
| 2026-05-22 00:04 · Suite alterada | 7.9 | 8.9 | 10.0 | 13/20 | 3 | 314,583 | $0.607 | 60.85s |
| Diferença | +0.5 | -0.1 | 0 | 0 | -69583 | -$0.110 | -7821ms |
Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.
Gráficos
Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.
Pontuação vs Custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Comparação rápida
Detalhamento por categoria
| Categoria | Pontuação | Consistência | Testes corretos |
|---|---|---|---|
| Truques anti-IA | 8.7 | 7.9 | |
| Programação | 10.0 | 10.0 | |
| Combinado | 10.0 | 10.0 | |
| Análise e extração de dados | 10.0 | 10.0 | |
| Específico do domínio | 5.3 | 10.0 | |
| Inteligência geral | 6.1 | 3.1 | |
| Seguimento de instruções | 10.0 | 10.0 | |
| Resolução de quebra-cabeças | 8.2 | 7.7 | |
| Chamada de ferramentas | 10.0 | 10.0 |