Navegação
Advertise here

KAT-Coder-Pro V2.5 vs Inkling Small (medium)

KAT-Coder-Pro V2.5 lidera na pontuação média com 6.1 vs 6.0. Inkling Small (medium) tem menor custo de benchmark com $0.118 vs $0.487. Inkling Small (medium) é mais rápido com 6.03s vs 24.96s, com taxas de acerto de 68.1% vs 50.7%.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-10-01

Modelos comparados

Posição
#236
Total de tokens de saída
139,572
Tempo de resposta (médio)
24.96s
Custo total
$0.487
Posição
#240
Total de tokens de saída
56,269
Tempo de resposta (médio)
6.03s
Custo total
$0.118
Modelo recomendado Inkling Small (medium)

A pontuação fica perto da melhor aqui (6.0 vs 6.1) e custa cerca de 4.1x menos que KAT-Coder-Pro V2.5.

Comparação detalhada

Métrica KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none Lançamento: 2026-07-14 Inkling Small Inkling Small medium Lançamento: 2026-08-01 Disponível grátis
Pontuação 6.1 6.0
Posição #236 #240
Confiabilidade 10.0 10.0
Consistência 7.1 9.1
Tentativas 69/69 69/69
Testes corretos
Taxa de acerto por tentativa 68.1% 50.7%
Testes instáveis 8 3
Execuções totais 69 69
Custo por resultado 4.419 1.177
Custo total $0.487 $0.118
Preço de entrada $0.740 / 1M $0.450 / 1M
Preço de saída $2.960 / 1M $1.200 / 1M
Total de tokens de entrada 98,508 100,255
Tokens de saída 139,572 6,422
Tokens de raciocínio 0 49,847
Tempo de resposta (médio) 24.96s 6.03s
Tempo de resposta (máx.) 335.41s 17.26s
Tempo de resposta (total) 574.12s 138.65s
Parâmetros ~700B no total (~72B ativos) 276B no total (12B ativos)
Disponibilidade Código fechado Código fechado

Geração showcase de modelos

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#236 KAT-Coder-Pro V2.5

none
Custo
$0.010
Tempo
29.0s
Tokens
3,439 tok

#240 Thinking Machines: Inkling Small

medium
Custo
$0.003
Tempo
13.4s
Tokens
1,753 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0
Inkling Small 7.8 10.0 66.7% 0 10.49s 7,374 434 13,783

Comparação rápida

Trocar par de comparação