#399 Cobuddy
medium- Custo
- $0.000
- Tempo
- 0.1s
- Tokens
- 0 tok
Resumo
Cobuddy marca 4.4 no AI BENCHY e fica em #399. Tem fiabilidade 10.0, taxa de acerto de 43.5%, custo total de $0.000 e tempo médio de resposta de 38.01s.
O que torna Cobuddy único: Destaca-se mais em Truques anti-IA, onde fica em #2, enquanto Específico do domínio é a área mais fraca em #12. O custo total do benchmark é invulgarmente baixo para este nível de pontuação.
Pesquisado em 2026-08-12
Melhor estimativa com base em evidências públicas; o fornecedor não divulgou todos os valores.
4.4
Consistência
7.3
10.0
$0.000
Total de tokens de saída
118,380
Total de tokens de entrada
37,449
Preço de entrada
$0.000 / 1M
Preço de saída
$0.000 / 1M
Preço de leitura do cache
N/D
Preço de escrita no cache
N/D
Os preços de cache aplicam-se aos tokens de entrada. A leitura reutiliza prompts em cache; a escrita armazena-os e pode custar mais. Os tokens de saída usam o preço de saída.
Testes errados: 15
Taxa de acerto por tentativa: 43.5%
Cobertura do benchmark: 66/69 tentativas (Meta: 3 repetições por teste)
Testes instáveis
6
Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).
38.01s
Tempo de resposta (máx.): 309.02s
Tempo de resposta (total): 798.15s
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Histórico de execuções
| Testado em | Pontuação | Confiabilidade | Testes corretos | Custo total | Comparar |
|---|---|---|---|---|---|
| 2026-10-01 05:10 Novo teste adicionado | 4.4 | 10.0 | $0.000 | Execução atual | |
| 2026-05-22 00:23 Suite alterada | 5.7 | 9.9 | $0.000 | Comparar | |
| 2026-05-06 11:30 Primeira execução registrada | 6.0 | 9.9 | $0.000 | Comparar |
Esta execução usou uma suite de benchmark diferente. Considere as mudanças na suite ao analisar a evolução histórica.
Comparação de execuções
| Execução | Cobertura do benchmark | Pontuação | Consistência | Confiabilidade | Testes corretos | Testes instáveis | Total de tokens de saída | Total de tokens de entrada | Custo total | Tempo de resposta (médio) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 05:10 · Execução atual | 66/69 tentativas | 4.4 | 7.3 | 10.0 | 7/22 | 6 | 118,380 | 37,449 | $0.000 | 38.01s |
| 2026-05-22 00:23 · Suite alterada | 60/60 tentativas | 5.7 | 7.0 | 9.9 | 7/20 | 7 | 118,185 | 0 | $0.000 | 39.91s |
| Diferença | — | -1.4 | +0.3 | +0.1 | 0 | -1 | +195 | +37449 | $0.000 | -1903ms |
A cobertura do benchmark é diferente: 66/69 tentativas (Meta: 3 repetições por teste) contra 60/60 tentativas (Meta: 3 repetições por teste). Totais e métricas sensíveis a repetições não são diretamente comparáveis.
Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.
Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.
| Categoria | Pontuação | Consistência | Testes corretos |
|---|---|---|---|
| Tarefas de agentes | 3.0 | 10.0 | |
| Truques anti-IA | 8.7 | 7.9 | |
| Programação | 3.7 | 6.7 | |
| Combinado | 1.5 | 5.0 | |
| Análise e extração de dados | 6.3 | 5.8 | |
| Específico do domínio | 2.9 | 4.4 | |
| Inteligência geral | 4.2 | 9.9 | |
| Seguimento de instruções | 9.8 | 10.0 | |
| Resolução de quebra-cabeças | 3.6 | 7.2 | |
| Chamada de ferramentas | 10.0 | 10.0 | |
| Conhecimentos gerais | 3.0 | 10.0 |