minimal lidera na pontuação média com 8.7 vs 7.6. minimal tem menor custo de benchmark com ~$0.206 vs ~$0.292. minimal é mais rápido com 108.28s vs 153.99s, com taxas de acerto de 66.7% vs 73.9%.
Benchmarks gerados a partir das suítes de teste do AI BENCHY em:
2026-11-22
Modelos comparados
As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
Posição
#202
Total de tokens de saída
129,600
Tempo de resposta (médio)
153.99s
Custo total
~$0.292A estimativa inclui apenas a eletricidade da GPU. Exclui o resto do computador e a aquisição do hardware. NVIDIA GeForce RTX 3090: 2.9515 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.291818.
As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
Posição
#108
Total de tokens de saída
219,084
Tempo de resposta (médio)
108.28s
Custo total
~$0.206A estimativa inclui apenas a eletricidade da GPU. Exclui o resto do computador e a aquisição do hardware. NVIDIA GeForce RTX 3090: 2.0753 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.205185.
Modelo recomendadominimal
Tem a pontuação mais alta nesta comparação (8.7) e o melhor equilíbrio geral entre custo e tempo de resposta entre os 2 modelos.
Comparação detalhada
Métrica
Inkling 2 Mini (local Q4)Inkling 2 Mini (local Q4)lowAs respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.Lançamento: 2026-11-20
Inkling 2 Mini (local Q4)Inkling 2 Mini (local Q4)minimalAs respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.Lançamento: 2026-11-20
Métrica
Inkling 2 Mini (local Q4)Inkling 2 Mini (local Q4)lowAs respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.Lançamento: 2026-11-20
Inkling 2 Mini (local Q4)Inkling 2 Mini (local Q4)minimalAs respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.Lançamento: 2026-11-20
Pontuação
7.6Pontuação média em todos os testes de benchmark.…
8.7Pontuação média em todos os testes de benchmark.…
Posição
#202
#108
Confiabilidade
9.7Pontuação de sucesso na primeira tentativa: 10.0 significa nenhum erro reexecutável da API alvo ou de limite de taxa antes de chamadas bem-sucedidas; falhas registradas reduzem a pontuação.…
9.8Pontuação de sucesso na primeira tentativa: 10.0 significa nenhum erro reexecutável da API alvo ou de limite de taxa antes de chamadas bem-sucedidas; falhas registradas reduzem a pontuação.…
Consistência
9.6A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
Tentativas
69/69
69/69
Testes corretos
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 5Não seguiu as instruções: 1Sem resposta: 1Tempo esgotado: 1Tempo de resposta (médio)153.99sTempo de resposta (máx.)1963.67sTempo de resposta (total)3541.85sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
66.7%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
73.9%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
Testes instáveis
1Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Execuções totais
69Execuções totais…
69Execuções totais…
Custo por resultado
~1.946A estimativa inclui apenas a eletricidade da GPU. Exclui o resto do computador e a aquisição do hardware. NVIDIA GeForce RTX 3090: 2.9515 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.291818.
~1.207A estimativa inclui apenas a eletricidade da GPU. Exclui o resto do computador e a aquisição do hardware. NVIDIA GeForce RTX 3090: 2.0753 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.205185.
Custo total
~$0.292A estimativa inclui apenas a eletricidade da GPU. Exclui o resto do computador e a aquisição do hardware. NVIDIA GeForce RTX 3090: 2.9515 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.291818.
~$0.206A estimativa inclui apenas a eletricidade da GPU. Exclui o resto do computador e a aquisição do hardware. NVIDIA GeForce RTX 3090: 2.0753 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.205185.
Preço de entrada
N/DPreço de entrada…
N/DPreço de entrada…
Preço de saída
N/DPreço de saída…
N/DPreço de saída…
Preço de leitura do cache
N/DPreço de leitura do cache…
N/DPreço de leitura do cache…
Preço de escrita no cache
N/DPreço de escrita no cache…
N/DPreço de escrita no cache…
Total de tokens de entrada
312,366Total de tokens de entrada…
309,808Total de tokens de entrada…
Tokens de saída
1,631Tokens de saída…
1,579Tokens de saída…
Tokens de raciocínio
127,969Tokens de raciocínio…
217,505Tokens de raciocínio…
Tempo de resposta (médio)
153.99sTempo de resposta (médio)…
108.28sTempo de resposta (médio)…
Tempo de resposta (máx.)
1963.67sTempo de resposta (máx.)…
1322.88sTempo de resposta (máx.)…
Tempo de resposta (total)
3541.85sTempo de resposta (total)…
2490.37sTempo de resposta (total)…
Parâmetros
26.4B no total (3.4B ativos)
26.4B no total (3.4B ativos)
Disponibilidade
Código aberto
Código aberto
Os preços de cache aplicam-se aos tokens de entrada. A leitura reutiliza prompts em cache; a escrita armazena-os e pode custar mais. Os tokens de saída usam o preço de saída.
Geração showcase de modelos
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#202 Thinking Machines: Inkling 2 Mini (local Q4)
lowAs respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
Custo
~$0.003A estimativa inclui apenas a eletricidade da GPU. Exclui o resto do computador e a aquisição do hardware. NVIDIA GeForce RTX 3090: 0.0237 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.002347.
Tempo
85.5s
Tokens
2,977 tok
#108 Thinking Machines: Inkling 2 Mini (local Q4)
minimalAs respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
Custo
~$0.002A estimativa inclui apenas a eletricidade da GPU. Exclui o resto do computador e a aquisição do hardware. NVIDIA GeForce RTX 3090: 0.0188 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.001862.
Tempo
67.8s
Tokens
2,348 tok
Posição
-
Custo
-
Tempo
-
Tokens
-
Melhores modelos por pontuação
Pontuação vs custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Detalhamento por categoria
Tarefas de agentes
Pontuação
Consistência
Taxa de acerto por tentativa
Testes instáveis
Testes corretos
Tempo de resposta (médio)
Tokens de entrada
Tokens de saída
Tokens de raciocínio
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
10.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
100.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)58.97sTempo de resposta (máx.)58.97sTempo de resposta (total)58.97sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
58.97sTempo de resposta (médio)…
138,225Total de tokens de entrada…
129Tokens de saída…
3,192Tokens de raciocínio…
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
10.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
100.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)59.04sTempo de resposta (máx.)59.04sTempo de resposta (total)59.04sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
59.04sTempo de resposta (médio)…
138,010Total de tokens de entrada…
121Tokens de saída…
3,216Tokens de raciocínio…
Truques anti-IA
Pontuação
Consistência
Taxa de acerto por tentativa
Testes instáveis
Testes corretos
Tempo de resposta (médio)
Tokens de entrada
Tokens de saída
Tokens de raciocínio
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
10.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
100.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.40sTempo de resposta (máx.)8.07sTempo de resposta (total)21.60sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
5.40sTempo de resposta (médio)…
732Total de tokens de entrada…
183Tokens de saída…
2,778Tokens de raciocínio…
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
10.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
100.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)6.20sTempo de resposta (máx.)10.50sTempo de resposta (total)24.78sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
6.20sTempo de resposta (médio)…
732Total de tokens de entrada…
234Tokens de saída…
3,168Tokens de raciocínio…
Programação
Pontuação
Consistência
Taxa de acerto por tentativa
Testes instáveis
Testes corretos
Tempo de resposta (médio)
Tokens de entrada
Tokens de saída
Tokens de raciocínio
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
5.3Pontuação média em todos os testes de benchmark.…
7.2A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
44.4%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
1Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Tempo esgotado: 1Resposta incorreta: 1Tempo de resposta (médio)831.97sTempo de resposta (máx.)1963.67sTempo de resposta (total)2495.90sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
831.97sTempo de resposta (médio)…
5,668Total de tokens de entrada…
524Tokens de saída…
34,490Tokens de raciocínio…
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
10.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
100.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)225.36sTempo de resposta (máx.)477.83sTempo de resposta (total)676.09sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
225.36sTempo de resposta (médio)…
8,814Total de tokens de entrada…
512Tokens de saída…
47,862Tokens de raciocínio…
Combinado
Pontuação
Consistência
Taxa de acerto por tentativa
Testes instáveis
Testes corretos
Tempo de resposta (médio)
Tokens de entrada
Tokens de saída
Tokens de raciocínio
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
6.5Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
50.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem resposta: 1Tempo de resposta (médio)123.84sTempo de resposta (máx.)227.77sTempo de resposta (total)247.69sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
123.84sTempo de resposta (médio)…
145,811Total de tokens de entrada…
48Tokens de saída…
29,790Tokens de raciocínio…
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
6.4Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
50.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Chamada de ferramenta inválida: 1Tempo de resposta (médio)671.08sTempo de resposta (máx.)1322.88sTempo de resposta (total)1342.15sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
671.08sTempo de resposta (médio)…
140,238Total de tokens de entrada…
52Tokens de saída…
117,641Tokens de raciocínio…
Análise e extração de dados
Pontuação
Consistência
Taxa de acerto por tentativa
Testes instáveis
Testes corretos
Tempo de resposta (médio)
Tokens de entrada
Tokens de saída
Tokens de raciocínio
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
10.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
100.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)20.83sTempo de resposta (máx.)21.70sTempo de resposta (total)41.66sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
20.83sTempo de resposta (médio)…
9,657Total de tokens de entrada…
207Tokens de saída…
4,340Tokens de raciocínio…
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
10.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
100.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)28.12sTempo de resposta (máx.)35.26sTempo de resposta (total)56.25sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
28.12sTempo de resposta (médio)…
9,657Total de tokens de entrada…
204Tokens de saída…
5,349Tokens de raciocínio…
Específico do domínio
Pontuação
Consistência
Taxa de acerto por tentativa
Testes instáveis
Testes corretos
Tempo de resposta (médio)
Tokens de entrada
Tokens de saída
Tokens de raciocínio
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
7.7Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
66.7%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)198.65sTempo de resposta (máx.)335.23sTempo de resposta (total)595.96sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
198.65sTempo de resposta (médio)…
825Total de tokens de entrada…
12Tokens de saída…
43,200Tokens de raciocínio…
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
7.7Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
66.7%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)88.16sTempo de resposta (máx.)147.25sTempo de resposta (total)264.48sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
88.16sTempo de resposta (médio)…
825Total de tokens de entrada…
12Tokens de saída…
31,686Tokens de raciocínio…
Inteligência geral
Pontuação
Consistência
Taxa de acerto por tentativa
Testes instáveis
Testes corretos
Tempo de resposta (médio)
Tokens de entrada
Tokens de saída
Tokens de raciocínio
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
5.5Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
0.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)5.55sTempo de resposta (máx.)5.55sTempo de resposta (total)5.55sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
5.55sTempo de resposta (médio)…
558Total de tokens de entrada…
60Tokens de saída…
672Tokens de raciocínio…
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
5.3Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
0.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)6.44sTempo de resposta (máx.)6.44sTempo de resposta (total)6.44sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
6.44sTempo de resposta (médio)…
558Total de tokens de entrada…
96Tokens de saída…
789Tokens de raciocínio…
Seguimento de instruções
Pontuação
Consistência
Taxa de acerto por tentativa
Testes instáveis
Testes corretos
Tempo de resposta (médio)
Tokens de entrada
Tokens de saída
Tokens de raciocínio
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
9.8Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
100.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.10sTempo de resposta (máx.)5.52sTempo de resposta (total)10.21sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
5.10sTempo de resposta (médio)…
738Total de tokens de entrada…
42Tokens de saída…
1,305Tokens de raciocínio…
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
9.8Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
100.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)5.25sTempo de resposta (máx.)5.70sTempo de resposta (total)10.49sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
5.25sTempo de resposta (médio)…
738Total de tokens de entrada…
45Tokens de saída…
1,323Tokens de raciocínio…
Resolução de quebra-cabeças
Pontuação
Consistência
Taxa de acerto por tentativa
Testes instáveis
Testes corretos
Tempo de resposta (médio)
Tokens de entrada
Tokens de saída
Tokens de raciocínio
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
5.8Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
33.3%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Resposta incorreta: 1Tempo de resposta (médio)10.51sTempo de resposta (máx.)14.31sTempo de resposta (total)31.52sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
10.51sTempo de resposta (médio)…
756Total de tokens de entrada…
396Tokens de saída…
3,885Tokens de raciocínio…
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
6.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
33.3%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Não seguiu as instruções: 1Resposta incorreta: 1Tempo de resposta (médio)7.32sTempo de resposta (máx.)7.68sTempo de resposta (total)21.96sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
7.32sTempo de resposta (médio)…
756Total de tokens de entrada…
270Tokens de saída…
2,652Tokens de raciocínio…
Chamada de ferramentas
Pontuação
Consistência
Taxa de acerto por tentativa
Testes instáveis
Testes corretos
Tempo de resposta (médio)
Tokens de entrada
Tokens de saída
Tokens de raciocínio
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
10.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
100.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)7.53sTempo de resposta (máx.)7.53sTempo de resposta (total)7.53sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
7.53sTempo de resposta (médio)…
9,180Total de tokens de entrada…
27Tokens de saída…
822Tokens de raciocínio…
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
10.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
100.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Sem respostas com falha.Tempo de resposta (médio)7.52sTempo de resposta (máx.)7.52sTempo de resposta (total)7.52sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
7.52sTempo de resposta (médio)…
9,264Total de tokens de entrada…
27Tokens de saída…
813Tokens de raciocínio…
Conhecimentos gerais
Pontuação
Consistência
Taxa de acerto por tentativa
Testes instáveis
Testes corretos
Tempo de resposta (médio)
Tokens de entrada
Tokens de saída
Tokens de raciocínio
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
3.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
0.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)25.28sTempo de resposta (máx.)25.28sTempo de resposta (total)25.28sUm teste é totalmente aprovado apenas quando todas as execuções passam.…
25.28sTempo de resposta (médio)…
216Total de tokens de entrada…
3Tokens de saída…
3,495Tokens de raciocínio…
Inkling 2 Mini (local Q4)As respostas do modelo candidato foram geradas em hardware local. O OpenRouter foi usado apenas para avaliação. inkling-2-mini-ud-q4_k_xl · UD-Q4_K_XL · llama.cpp b12631-e300919cc · NVIDIA GeForce RTX 3090.
3.0Pontuação média em todos os testes de benchmark.…
10.0A consistência reflete a estabilidade entre execuções (10 = muito consistente, mesmo que consistentemente errado).…
0.0%Taxa de acerto por tentativa = tentativas aprovadas / tentativas totais em todas as execuções.…
0Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).…
Um teste é totalmente aprovado apenas quando todas as execuções passam.Resposta incorreta: 1Tempo de resposta (médio)21.18sTempo de resposta (máx.)21.18sTempo de resposta (total)21.18sUm teste é totalmente aprovado apenas quando todas as execuções passam.…