Boas práticas de benchmarking que se sustentam

Uma tabela de comparação é rápida de criar. Transformá-la numa ferramenta de decisão fiável exige mais cuidado: um âmbito claro, critérios úteis e um método de pontuação que os leitores consigam perceber.

Comece pela decisão, não pelos dados

Recolher dados antes de enquadrar a decisão costuma gerar uma tabela demasiado ampla. 'Que portátil devo comprar?' é uma pergunta vaga. 'Que portátil abaixo de 1000 USD serve um estudante de ciência da computação que executa máquinas virtuais?' já define um orçamento, um público e um caso de utilização.

Esse âmbito ajuda a escolher as opções, os critérios e a importância relativa de cada um. Permite também que os leitores vejam de imediato se a comparação se aplica a eles.

Limite os critérios ao que importa

Nem todo o critério possível deve entrar na tabela. Cinco a oito costumam ser um bom ponto de partida, mas o número certo depende do assunto. Antes de manter um critério, faça duas perguntas: uma diferença aqui pode mudar a escolha? As opções diferenciam-se realmente neste ponto?

• Agrupe medidas muito relacionadas quando um critério-resumo for suficiente, como a memória RAM, o processador e o armazenamento sob 'Desempenho'.
• Separe os requisitos inegociáveis dos critérios de preferência.
• Elimine duplicados quando dois critérios avaliarem praticamente a mesma qualidade.
• Peça a alguém que não conheça o tema para rever as designações.

Use os pesos com intenção

Os critérios raramente têm a mesma importância. O preço pode dominar uma comparação com um orçamento apertado, enquanto a qualidade de imagem pesa mais para um fotógrafo. Os pesos representam essas prioridades.

Mostre os pesos e explique as escolhas que não são óbvias. Uma frase costuma bastar: 'A facilidade de utilização tem mais peso porque esta comparação se destina a utilizadores iniciantes.' Assim, os leitores podem aceitar o método ou interpretar os resultados de outra forma.

Separe factos de juízos de valor

Alguns critérios são mensuráveis, enquanto outros dependem de um juízo de valor. Um benchmark é mais credível quando deixa essa distinção clara.

• Use um valor verificável sempre que o critério o permitir, como o preço ou a capacidade de armazenamento.
• Num juízo de valor, descreva brevemente o método e quem fez a avaliação.
• Assinale os compromissos quando uma opção se destacar numa área, mas ficar aquém noutra.
• Acrescente uma nota ou uma fonte quando os leitores precisarem de contexto para compreender uma pontuação.

Deixe os leitores explorar os resultados

Uma classificação geral não conta a história completa. Mostre as pontuações por critério e, quando o formato o permitir, deixe os leitores filtrar ou ordenar os resultados de acordo com as suas prioridades.

Os filtros e as ferramentas de ordenação do Benchmark Maker permitem analisar uma seleção mais restrita. Uma opção com uma pontuação total mais baixa pode, ainda assim, ser a escolha certa para uma necessidade específica.

Mantenha o benchmark atualizado

Preços, funcionalidades ou disponibilidade desatualizados podem distorcer a conclusão. A frequência de revisão depende do assunto. O mercado de software costuma mudar mais depressa do que uma comparação de métodos consolidados.

• Escolha uma periodicidade de revisão compatível com a rapidez com que os dados mudam.
• Apresente com clareza a data da última atualização.
• Registe as alterações importantes e o motivo de cada uma.
• Acrescente uma nova opção apenas quando ela couber no âmbito original.

Escreva para o leitor a que se destina

Os leitores podem não partilhar o seu vocabulário. Dê aos critérios nomes simples e explique os termos especializados, como 'IOPS', quando forem necessários para a comparação.

Adapte também as opções ao público. Uma comparação especializada pode incluir produtos de nicho, enquanto um guia geral deve privilegiar opções fáceis de encontrar.

Antes de publicar

Leia o benchmark como se o tema lhe fosse novo. O âmbito está claro? Os critérios medem coisas distintas? As pontuações seguem o método declarado? Os dados são recentes o suficiente? Se estes quatro pontos se verificarem, os leitores conseguem compreender o resultado e decidir se corresponde às suas prioridades.