#11 Qwen3.5-27B
medium- Custo
- $0.008
- Tempo
- 62.0s
- Tokens
- 3,099 tok
Qwen
Lançamento: 2026-02-24
Testado em: 2026-04-11 01:44
qwen/qwen3.5-27b::medium
27BDensoCódigo aberto
(medium)
(none)
Resumo
Qwen3.5-27B marca 8.4 no AI BENCHY e fica em #11. Tem fiabilidade N/D, taxa de acerto de 81.5%, custo total de $0.497 e tempo médio de resposta de 53.03s.
Dados do modelo
Pesquisado em 2026-08-12
- Parâmetros
- 27B
- Arquitetura
- Denso
- Disponibilidade
- Código aberto
- Licença
- Apache-2.0
8.4
Consistência
8.8
$0.497
Total de tokens de saída
245,000
Total de tokens de entrada
0
Preço de entrada
$0.195 / 1M
Preço de saída
$1.560 / 1M
Testes instáveis
3
Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).
53.03s
Tempo de resposta (máx.): 163.96s
Tempo de resposta (total): 954.46s
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Histórico de execuções
| Testado em | Pontuação | Confiabilidade | Testes corretos | Custo total | Comparar |
|---|---|---|---|---|---|
| 2026-08-14 01:58 Novo teste | 7.5 | 10.0 | $0.982 ↓ | Comparar | |
| 2026-07-16 22:51 Novo teste adicionado | 7.4 | 10.0 | $0.981 ↓ | Comparar | |
| 2026-06-04 13:40 Novo teste adicionado | 7.8 | 10.0 | $0.536 ↓ | Comparar | |
| 2026-05-22 00:04 Suite alterada | 7.9 | 10.0 | $0.607 | Comparar | |
| 2026-04-11 01:44 Primeira execução registrada | 8.4 | N/D | $0.497 | Execução atual |
Comparação de execuções
| Execução | Cobertura do benchmark | Pontuação | Consistência | Confiabilidade | Testes corretos | Testes instáveis | Total de tokens de saída | Total de tokens de entrada | Custo total | Tempo de resposta (médio) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · Primeira execução registrada | 54/54 tentativas | 8.4 | 8.8 | N/D | 13/18 | 3 | 245,000 | 0 | $0.497 | 53.03s |
| 2026-08-14 01:58 · Novo teste | 66/66 tentativas | 7.5 | 7.8 | 10.0 | 13/22 | 6 | 614,909 | 111,644 | $0.982 | 113.28s |
| Diferença | — | +1.0 | +1.0 | 0 | -3 | -369909 | -111644 | -$0.485 | -60259ms |
A cobertura do benchmark é diferente: 54/54 tentativas (Meta: 3 repetições por teste) contra 66/66 tentativas (Meta: 3 repetições por teste). Totais e métricas sensíveis a repetições não são diretamente comparáveis.
Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.
Gráficos
Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.
Melhores modelos por pontuação
Pontuação vs Custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Comparação rápida
Qwen3.5-27BmediumvsQwen3.5 Plus 2026-02-15mediumQwen3.5-27BmediumvsGPT-5.4 MinimediumQwen3.5-27BmediumvsGPT 5.3 ChatnoneQwen3.5-27BmediumvsGrok Build 0.1mediumQwen3.5-27BmediumvsMiniMax M3mediumQwen3.5-27BmediumvsGemini 3.1 Flash Lite PreviewmediumQwen3.5-27BmediumvsGPT-5.6 TerralowQwen3.5-27BmediumvsQwen3.7 MaxnoneQwen3.5-27BmediumvsGPT-5.4 NanomediumQwen3.5-27BmediumvsKimi K2.7 Codemedium
Detalhamento por categoria
| Categoria | Pontuação | Consistência | Testes corretos |
|---|---|---|---|
| Truques anti-IA | 8.7 | 7.9 | |
| Programação | 10.0 | 10.0 | |
| Combinado | 10.0 | 10.0 | |
| Análise e extração de dados | 10.0 | 10.0 | |
| Específico do domínio | 5.3 | 10.0 | |
| Inteligência geral | 6.1 | 3.1 | |
| Seguimento de instruções | 10.0 | 10.0 | |
| Resolução de quebra-cabeças | 8.2 | 7.7 | |
| Chamada de ferramentas | 10.0 | 10.0 |